技术问答RAG 与知识库
同一份文档换了分块方式,为什么检索结果反而变差?
遇到的问题 将知识库从固定长度分块改成按标题分块后,部分短问题的正确证据排名下降。模型和检索条数保持一致,想讨论如何有步骤地定位原因。 已经尝试的方法 先对比命中片段长度、标题是否进入嵌入文本,以及重复内容是否挤占结果。还需要构建固定测试集,避免只用几条主观印象来判断。 期望的结果 希望得到一个可复
分享实战教程,交流技术难题,记录项目背后的思考。
“向量检索” 的搜索结果 · 清除搜索
遇到的问题 将知识库从固定长度分块改成按标题分块后,部分短问题的正确证据排名下降。模型和检索条数保持一致,想讨论如何有步骤地定位原因。 已经尝试的方法 先对比命中片段长度、标题是否进入嵌入文本,以及重复内容是否挤占结果。还需要构建固定测试集,避免只用几条主观印象来判断。 期望的结果 希望得到一个可复