首页 > 项目 > 当前页面

RAG可观测性主要分三个层次

2026-07-27 NEW个对象

RAG可观测性主要分三个层次。检索层关注召回质量,例如Recall、chunk覆盖率,判断知识是否被正确找到;生成层关注faithfulness和answer relevance,判断模型是否基于知识回答以及是否解决用户问题;系统层关注性能和成本,例如TTFT、Token消耗。工程上会通过LangSmith或LangFuse记录完整trace,包括query、retrieval chunks、prompt、模型输出和token消耗。上线前通过评估集和A/B测试验证优化效果,上线后结合自动指标和人工抽检持续优化。

上一篇:大模型Transformer的理解

下一篇:

相关文章

NEW个对象 NEW个对象
JAVA是世界上最好的语言