Skip to content
🔗 分享本题
查看我的学习进度 →

RAGAS 上下文精度、召回、忠实性和回答相关性诊断图

🧠 记忆锚点:Precision 看召回结果准不准,Recall 看证据全不全,Faithfulness 看回答是否有据,Relevancy 看是否答题。

💡 答案要点

RAGAS 四个核心指标:

指标说明计算方式合格线
Faithfulness(忠实度)答案是否基于检索内容答案中的陈述能否在上下文中找到依据> 0.7
Answer Relevance(答案相关性)答案是否回答问题答案与问题的语义相似度> 0.8
Context Relevance(上下文相关性)检索内容是否有用检索内容中与问题相关的比例> 0.8
Context Recall(上下文召回率)是否检索到了正确答案标准答案中的信息是否在检索内容中> 0.8

优化策略:

指标低可能原因优化方案
Faithfulness 低模型瞎编增加检索结果数量、优化 Prompt
Answer Relevance 低答非所问优化检索查询、改进 Prompt
Context Relevance 低检索内容不相关改进 Embedding、加 Rerank
Context Recall 低没检索到正确答案混合检索、扩大检索范围

面试话术:

"Faithfulness 低于 0.7 会触发告警,说明模型可能在瞎编。我通过增加检索结果数量和在 Prompt 中强调'只基于检索内容回答',把 Faithfulness 从 0.65 提升到了 0.82。"