效率
返回Skills 列表
长文切块 Skill
长文按行或字符切块:断点自动落在标题与空行处段落不腰斩,产出编号块文件与清单,喂 LLM 和批量翻译的前置工具。
📁 长文切块 Skill /
SKILL.md0.8 KB
scripts
chunk_splitter.py3.7 KB
samples
long-article.md1 KB
references
chunk-notes.md0.5 KB
所有文件均为纯文本展示,仅提供查看与打包下载,不在服务器上执行。
SKILL.md
---
name: chunk-splitter
description: 长文按行或字符切块:断点自动落在标题与空行处段落不腰斩,产出编号块文件与清单,喂 LLM 和批量翻译的前置工具。
---
# 长文切块 Skill
## 触发条件
当长文喂 LLM 需要分段、翻译批量任务、或把长稿按章节分发时触发。
## 执行步骤
1. 运行 python scripts/chunk_splitter.py samples/long-article.md --size 20 --by lines。
2. 看清单:块数、每块行数与字符数。
3. 断点自动落在标题或空行,段落不腰斩。
4. 喂 LLM 用字符口径(--by chars --size 1800)。
5. 处理完按块序号拼回还原全文。
## 依赖
Python 3 标准库(argparse/pathlib),离线运行,不修改原文件。
## 输出
切块文件 chunk-NN.md(原目录旁)+ chunk-manifest.md 清单(行数字符数)。
纯文本预览
全站累计复制 0 次
使用说明
python scripts/chunk_splitter.py 文件 --size 200 --by lines;LLM 场景用 --by chars --size 1800。
每个 IP 仅可点赞一次 · 点赞后不可取消

暂无评论,来发表第一条评论吧!