Bits-over-Random 指标如何改变了我对 RAG 和智能体的看法
📌 一句话摘要 本文探讨了 Bits-over-Random (BoR) 指标如何通过优先考虑选择性而非单纯的覆盖率来重新定义 RAG 和智能体的检索评估,从而防止上下文污染。 📝 详细摘要 作为一名信息检索专家,作者认为 Success@K 和 Recall 等传统指标对于基于 LLM 的系统来说是不够的,因为它们没有考虑到“上下文污染”。与人类不同,LLM 难以忽略提示词中的无关信息,这意味着“暴力”检索(即为了确...