← 全部期次
第十二期 · 13:16

分段模式能自动设吗机器给建议,人拍板

RAG 知识库 · 建库与运维 · 建库第一天要做的决定|技术解析

本视频含 AI 生成内容(音频由 AI 合成,已按平台要求声明)。

本期聊什么

这是「RAG 知识库 · 建库与运维」系列的第一讲。建库第一天要做的那个决定:分段模式——通用、问答对、父子。

三种模式各自解决什么:通用分段是一段一向量、命中即返回,但会撞上两难——段落切太小,检索准了上下文却碎了(答案缺胳膊少腿);切太大,上下文全了但向量被稀释(问 A 命中 B)。实测翻车现场:FAQ 里问「首次登录默认账号密码是什么」,命中的却是「固件升级」段。父子模式拆成两层——子段小而准负责被召回,父段大而全负责喂模型;问答对模式让每段生成「问题→标准答案」,用问题建向量,解决叙述体和短句提问的形态错配。

能不能自动设:能自动一部分。问答结构(一问一答的条目集)有强文本信号——问号收尾标题、Q:/问:前缀、条目短,靠确定性规则统计就能识别并给建议(没有模型参与);而父子还是通用是语义判断,没有可靠的文本统计信号,只给提示由人拍板。边界画在这里,是因为两类误判的代价都高,远高于「人花一分钟确认」。

两个机制事实:分段模式是文档级的(界面上那个选项只是上传默认值,同库混排完全合法);模式在分段时定死,改模式等于删旧重传——所以「先通用建库、发现问题再改」是最贵的一条路。

五步操作链:拆分(按可独立变更的内容单元)→ 机器给建议(扫问答信号)→ 人确认(几十篇只需几分钟)→ 上传逐篇指定 → 自检(各模式验证点不同)。

金句:自动化负责给建议,人负责拍板——建库决策里没有全自动这回事,但也没有全手工的必要。

完整文字版见下方文章。

时间轴
  1. 00:01开场:分段模式与自动建议
  2. 00:44这个选择影响用户体验
  3. 02:14通用分段的两难
  4. 03:08问答对与父子模式解决什么
  5. 04:01自动设置的边界在哪
  6. 06:59怎么判断该用哪个
  7. 07:51五步流程:机器建议、人拍板
  8. 12:01先通用建库的隐患
本期的文字版

联系我

邮箱contact@fishsun.cn

点击邮箱直接写信 · 扫码加微信沟通

微信

微信二维码

扫码加微信 · 备注「门户」更快通过