门道

RAG 知识库切片到底怎么切,才不丢召回

入选理由按段落标题切并保留标题前缀,再上父子分片:小片 300–500 字做召回、回链 1000–1500 字父片生成,并用状态机与回读校验拦住空向量。

知乎 搜索

RAG 知识库切片到底怎么切,才不丢召回

原文摘录切错了,后面再强的检索模型也救不回来。我直接说我们验证过的结论和踩坑。 核心结论:不能整篇向量化。 向量是按"块"算语义的。一篇 8000 字规范整段向量化,查询向量去匹配这个超长向量,相关性被平均掉——真正相关的 200 字淹没在 7800 字的噪声里。必须切片。 四种策略,从…
打开原文

知乎没登录时,原文可能整页显示成乱码(知乎的反爬措施),登录知乎或用知乎 App 打开就正常。

内容在原平台,这里不转载全文。版权归原作者。权利人如需下架,请看下架说明。

踩坑复盘实测对比进阶长文只有经验小团队#切片策略#父子分片#回读校验