切块

1 篇文章

知识库切块方案:统一维护 Markdown,按标题结构切块

知识库维护的是一份 Markdown:PDF、网页、人工资料和问答都转成同一种约定,切块只读 Markdown 的标题树和块结构。本文介绍这套约定、PDF 的转写与校验、按标题层级切块的规则,并用检索评测说明为什么一个标题一个片段效果最好。

  • AI
  • RAG
  • 切块
  • Markdown
2026年11月15日 · 13 分钟 · 6482 字 · Sam Peng
不同来源先统一成带标题层级的 Markdown,再按标题切成片段