RAG:测量比代码更重要。一个机器人因“正确”改进而导致结果恶化的故事
一位开发者为加密聊天审核构建了RAG机器人,却发现标准改进——BM25和重排序器——反而降低了指标。唯一有效的改动是校准截断阈值。文章强调了在自己的数据上进行仔细测量的重要性。
Habr — хаб ИИ27.07 · 09:03
一位开发者为加密聊天审核构建了RAG机器人,却发现标准改进——BM25和重排序器——反而降低了指标。唯一有效的改动是校准截断阈值。文章强调了在自己的数据上进行仔细测量的重要性。