RAG 离线检索评测（18 题）

使用冻结题集检查每个问题的 Top 5 结果是否至少命中一个预先标注的可接受来源，命中问题数占比记为 Hit Rate@5。题集规模较小且来源标签由项目维护者标注；结果只衡量离线检索排序，不代表生成答案准确率、线上流量或商业效果。

样本量

18

Hit Rate@5

100.0%

P95 检索延迟

305 ms

逐题结果 生成时间：2026-07-14T14:38:10.028266+00:00

基本信息 · profile-01

朱旭的学校、专业和毕业届别是什么？

Hit 1

期望来源：00_master_profile.md、01_public_profile.md

实际来源：01_public_profile.md、00_master_profile.md、README.md、06_hr_interview_qa.md、05_experience_timeline.md

基本信息 · profile-02

朱旭当前希望寻找什么方向的实习？

Hit 1

期望来源：00_master_profile.md、01_public_profile.md

实际来源：00_master_profile.md、06_hr_interview_qa.md、06_hr_interview_qa.md、README.md、01_public_profile.md

基本信息 · profile-03

如何联系朱旭并查看他的 GitHub？

Hit 1

期望来源：01_public_profile.md

实际来源：01_public_profile.md、05_experience_timeline.md、myagent.md、myagent.md、00_master_profile.md

实习经历 · intern-01

朱旭在长冈医疗科技有限公司做了什么？

Hit 1

期望来源：changgang_embedded_internship.md、00_master_profile.md、06_hr_interview_qa.md

实际来源：README.md、06_hr_interview_qa.md、06_hr_interview_qa.md、00_master_profile.md、myagent.md

实习经历 · intern-02

血压计程控电路项目涉及哪些控制和调试工作？

Hit 1

期望来源：changgang_embedded_internship.md

实际来源：changgang_embedded_internship.md、00_master_profile.md、README.md、06_hr_interview_qa.md、mood_trackerREADME.md

面向智能硬件客服场景的可治理 Agent 平台 · agent-01

面向智能硬件客服场景的可治理 Agent 平台整体架构是什么？

Hit 1

期望来源：agentproject.md、agentprojectREADME.md

实际来源：agentprojectREADME.md、agentprojectREADME.md、agentproject.md、agentproject.md

面向智能硬件客服场景的可治理 Agent 平台 · agent-02

Dense、BM25 和 RRF 在可治理 Agent 平台中如何配合？

Hit 1

期望来源：agentproject.md、agentprojectREADME.md

实际来源：agentprojectREADME.md、agentprojectREADME.md、agentproject.md、07_technical_interview_qa.md

面向智能硬件客服场景的可治理 Agent 平台 · agent-03

BudgetManager 如何限制 Agent 的成本和执行步骤？

Hit 1

期望来源：agentproject.md、agentprojectREADME.md

实际来源：07_technical_interview_qa.md、agentproject.md、agentprojectREADME.md、agentprojectREADME.md

面向智能硬件客服场景的可治理 Agent 平台 · agent-04

可治理 Agent 平台的离线检索评测结果如何？

Hit 1

期望来源：agentproject.md、agentprojectREADME.md

实际来源：agentproject.md、agentprojectREADME.md、agentproject.md、agentprojectREADME.md

法奥项目 · farino-01

法奥机器人智能客服平台是什么性质的项目？

Hit 1

期望来源：farino.md、farinoREADME.md

实际来源：farinoREADME.md、farino.md、farinoREADME.md、farino.md

法奥项目 · farino-02

法奥项目的 Direct 和 Agentic 两级路由如何工作？

Hit 1

期望来源：farino.md、farinoREADME.md

实际来源：07_technical_interview_qa.md、farino.md、farinoREADME.md、farino.md、07_technical_interview_qa.md

法奥项目 · farino-03

法奥客服平台如何处理 QA 数据沉淀和工单？

Hit 1

期望来源：farino.md、farinoREADME.md

实际来源：farino.md、farinoREADME.md、farino.md、farinoREADME.md

本站项目 · myagent-01

个人招聘知识 Agent 使用了哪些后端和 RAG 技术？

Hit 1

期望来源：myagent.md、myagentREADME.md

实际来源：myagent.md、myagent.md、10_agent_answer_policy.md、agentprojectREADME.md、01_public_profile.md

本站项目 · myagent-02

本站如何实现引用来源和 SSE 流式回答？

Hit 1

期望来源：myagent.md、myagentREADME.md

实际来源：myagent.md、myagent.md、07_technical_interview_qa.md、README.md、07_technical_interview_qa.md

情绪分析项目 · mood-01

情绪分析日记项目使用了哪些传统机器学习方法？

Hit 1

期望来源：mood_tracker.md、mood_trackerREADME.md

实际来源：mood_tracker.md、mood_tracker.md、mood_trackerREADME.md、mood_trackerREADME.md

情绪分析项目 · mood-02

情绪分类模型如何接入 Django 页面？

Hit 1

期望来源：mood_tracker.md、mood_trackerREADME.md

实际来源：mood_trackerREADME.md、mood_trackerREADME.md、mood_tracker.md、mood_tracker.md

知识边界 · boundary-01

朱旭是否有正式 AI 岗位实习和大规模线上经验？

Hit 1

期望来源：08_risk_and_consistency.md、00_master_profile.md、06_hr_interview_qa.md

实际来源：06_hr_interview_qa.md、06_hr_interview_qa.md、README.md、00_master_profile.md、05_experience_timeline.md

知识边界 · boundary-02

朱旭的 GPA、排名和英语成绩是多少？

Hit 1

期望来源：09_missing_information_checklist.md、08_risk_and_consistency.md、01_public_profile.md、00_master_profile.md

实际来源：01_public_profile.md、00_master_profile.md、06_hr_interview_qa.md、README.md、06_hr_interview_qa.md