一份带题号、题干、标准答案、干扰项和一句错误原因说明的 Markdown 测试题文件,按用户勾选的幻觉类型分布,可附 JSON 版
题干一行,下面用列表列出正答和 3-4 个干扰项,每题一条简析,条理清楚写个能测出模型幻觉的测试集题目
点几下,几分钟拿到带答案和迷惑干扰项的幻觉测试题
在GPT中文网办「写个能测出模型幻觉的测试集题目」:点「直接办这件事」,点选测试领域、题目难度、重点检测幻觉类型等 13 项,AI 当场做出写好的文字,能复制,也能下载成 Word 或 PDF。免费,不用注册。
详细说明
为大模型应用工程师生成10道高区分度幻觉检测题,含标准答案与典型错误干扰项;不替代人工评测,不保证覆盖全部幻觉类型。
- 「帮我出几道专门戳模型瞎编的题」AI 先替你选好:生成题量·10 输出格式·带编号的逐题段落 答案呈现方式·标准答案+干扰项列表 干扰项风格·逻辑合理但无依据还要问你:题目测哪个领域?(历史事实 / 科技常识 / 地理名称 / 法律条文)
- 「要那种看着特别真、其实错得离谱的干扰项」AI 先替你选好:干扰项风格·逻辑合理但无依据 生成题量·10 输出格式·带编号的逐题段落 答案呈现方式·标准答案+错误原因简析还要问你:重点想测哪些瞎编类型?(虚构人物关系 / 捏造时间节点 / 伪造文献出处 / 混淆作品归属)
- 「给我出10道题,专门测大模型会不会瞎编事实。」AI 先替你选好:生成题量·10 输出格式·带编号的逐题段落 答案呈现方式·标准答案+干扰项列表 干扰项风格·逻辑合理但无依据还要问你:题目难度要哪档?(入门级(常识级错误) / 进阶级(时间/地点混淆) / 专家级(文献级冷知识) / 陷阱级(合理推断但无依据))
直接办这件事 →文字类免费 · 不注册也能办
能交什么
- 幻觉测试题全集(Markdown)按领域和幻觉类型分组,每题有题干、正答、干扰项和一句简析
- JSON 题库文件每道题一个对象,含题干、答案、干扰项、幻觉类型字段,可直接导入评测脚本
- 评测说明一页写明每道题考查的幻觉类型、合格判定和打分建议
- 答案核验清单逐题标出依据来源或标注需人工复核,格式为可核对表格
你只要:点几个选项、填一句知识点,可上传资料
常见问题
关于这件事怎么办
写个能测出模型幻觉的测试集题目需要准备什么?
需要填的是:测试领域、题目难度、重点检测幻觉类型、干扰项风格、答案呈现方式、指定知识点或案例、生成题量、输出格式等 13 项。每一项点一下就行,多数不用打字。点「直接办这件事」就开工;没选全也能先办,回头补了随时能改。
能拿到什么成果?
交付形式是文本/文案——平台直接写好给你,能复制,也能下载成 Word 或 PDF。在GPT中文网(www.gpt.com.cn)按字段填完即可拿到。文字类成果免费生成,免注册即可试。
什么情况下需要写个能测出模型幻觉的测试集题目?
手工编题耗时长,干扰项缺乏迷惑性,难覆盖‘看似合理实则虚构’这类高阶幻觉。遇到这种情况,把信息按字段点选一遍,AI 按你点的出成品,不用自己琢磨怎么说。
适合谁用?
负责大模型评测、SFT数据构建或RAG效果验证的算法/应用工程师。不需要 AI 使用经验,按字段填完即可。
同类场景
其他全部 →- 把用户对话日志抽成意图-槽位标注样本从一段真实用户多轮对话记录中,自动标注出意图类型和关键槽位值(如时间、地点、数量)…出文字 · 免费
- 把模糊需求转成技术指标把‘要更懂用户’‘回复别太机械’这类口语化需求,拆解成具体、可测的指标(如响应多样性得分…出文字 · 免费
- 流式如何取token用量与报错处理流式结束拿不到 usage 做计费,中途报错还会让用户对着半截文本白屏。出文字 · 免费
- 流式解析工具调用流式返回里既有正文又有 tool_calls,arguments 分片到达…出文字 · 免费
- 几千条批量调用大模型跑太慢怎么提速几千条任务串行跑要好几个小时,想加速又怕并发一大就撞限流,不知最优并发数。出文字 · 免费
- 上万条批量调用大模型断点续跑脚本上万条批量跑到一半进程崩了或断网,重跑又要从头来,之前的钱和时间全白费。出文字 · 免费
- 调大模型API一并发就429怎么限速并发一开就被厂商返回429 Too Many Requests,靠事后重试硬扛越撞越堵…出文字 · 免费
- asyncio信号量控并发一条一条串行调API太慢,直接全量并发又会撞限流,不知道并发数该卡多少。出文字 · 免费
接下来可能要办
AI开发者全部 →- 写 AI 使用方案给AI下指令效果时好时坏,把使用场合和现在的问题告诉我,我帮你设计一套更稳定管用的指令写法,少走…出文字 · 免费
- 算Token数控制成本用tokenizer预估token量,提前算好单次和批量调用费用出文字 · 免费
- 检索加重排序rerank向量召回后加rerank把最相关片段排前面,提升答案质量出文字 · 免费
- 处理Agent执行出错回退某步工具报错时让Agent识别、换方案或重试而不是崩出文字 · 免费
- 选大模型做对比方案说清用途和硬要求,拿到一份带对比表和成本测算的选型方案。出文字 · 免费
- 做AI用量计费额度系统按token或次数给用户计费扣额度,设计超限提示和套餐出文档 · 免费