GPT中文小秘书挑几下就能开工
我积分

追查RAG答错的根因

关于「追查RAG答错的根因」:能拿到什么、要点选什么、怎么办

召回原文摆一起,逐层揪出答错根因。RAG答错根因定位是逐层比对召回与原文、判定切分/召回/prompt/模型问题;在GPT中文网点选几项,能直接拿到根因定位表+修复建议。

能拿到什么

  • 推荐:RAG答错根因定位表(分切分/召回/prompt/生成四层,每层判定、依据、修复建议三列)

要你点选的几项

上传报错问答、上传知识库原文、答错类型、召回信息包含、切分chunk大小、召回top-k数、缺失标识词。多数点一下就行,没选的按常见情况替你定,交付时说清哪几项是按默认的。

怎么办

  1. 把报错问答、召回片段、原文摆在一起逐层比对
  2. 按相似度对召回片段排序,检查相关chunk是否进top-k
  3. 判断切分是否过碎或断章,prompt是否缺约束
  4. 对照原文判定模型是否胡编,统计缺失标识
  5. 汇总根因判定并给出分层修复建议

别人还这样说

  • 把召回片段和原文放一起比对,看是切分太碎还是top-k漏了。
  • 这次回答明显不对,帮我出一张根因定位表加修复建议。
你好,我是你的AI小秘书。
直接说你要办什么事,我先跟你确认一遍要点,你点头我再动手。
说得糙也没关系,我会问你几个选项,点一下就行。下面这位朋友就是这么办的。
线上有个RAG问答答错了,帮我看看是召回没召到还是模型胡编。

追查RAG答错的根因 能替你选的都选好了,不想动直接开工

▤ 文档按你的点选来交付,可直接使用
已替你定下:
这是预览 · 点「开工」才真做

GPT中文 也可能出错,成品请自己核对关键数字和事实。条款 · 隐私