如何设计 RAG 评估方案和指标?

暂无参考答案

未标记

本题目录

相关面经

17

广电数科

Java 开发工程师
实习
查看原面经 →
你们如何得到召回率指标的

字节跳动

后端开发工程师
秋招一面
查看原面经 →
如何评测问答agent的效果,评测集有构建吗,效果怎么样

阿里巴巴

AI 应用开发工程师
秋招二面
查看原面经 →
你对 RAG 做过哪些评测?如何分别评估召回质量和最终回答质量?

阿里巴巴

AI 全栈开发工程师
一面
查看原面经 →
项目追问
你做完这些以后是怎么去评测的呢?怎么认为这个 RAG 效果一定是好的?评测方式是什么?(追问)你对比的方式是什么?怎么证明它是提升的?系统中是如何对比的?(追问)你后来还是通过工程这种规则的方式去评估是吧?

作业帮

Agent 应用开发工程师
秋招一面
查看原面经 →
RAG 的准确率、召回率有没有做过评测。
展开剩余 12 篇面经

阿里巴巴

全栈开发工程师
二面
查看原面经 →
当时你们怎么去评测这个问答效果的好与坏?(追问)怎么去做的评估?

滴滴

数据开发工程师
秋招二面
查看原面经 →
召回率如何评估

去哪儿

AI 测试开发工程师
秋招
查看原面经 →
RAG准确率判断、优化及不用其他方法的原因

阿里巴巴

大模型应用开发工程师(RAG 方向)
一面
查看原面经 →
这个 RAG 的质量是有评估吗?

阿里巴巴

大模型算法工程师
一面
查看原面经 →
一套完整RAG系统,该从哪些维度设计量化评估指标,衡量整体效果好坏?

MiniMax

大模型算法工程师
查看原面经 →
如何评估一个RAG系统是否真正 work?有哪些具体的指标或框架?

阿里巴巴

AI 应用开发工程师
暑期实习二面
查看原面经 →
评测机制是怎么构建的,评测集是怎么构建的

滴滴

Agent 应用开发工程师
一面
查看原面经 →
RAG评估的指标

字节跳动

Agent 应用开发工程师
实习二面
查看原面经 →
RAG评估方案

顺丰

大模型应用开发工程师(RAG 方向)
实习
查看原面经 →
RAG怎么评估,用了哪些指标;
追问
RAGAS有哪些指标,为什么不直接用库;

京东

大模型算法工程师
查看原面经 →
如何评测RAG系统的准确率?

顺丰

大模型应用开发工程师(RAG 方向)
查看原面经 →
RAG怎么评估,用了哪些指标;
追问
RAGAS有哪些指标,为什么不直接用库;

收录题集

2

Agent开发面试题(附链接版

摸鱼酱mio · 个人整理 · 收录 1 道

查看题集 →

RAG 的评测指标有哪些(如准确率、召回率等)?

RAG 面试题

小林 Coding · 个人整理 · 收录 1 道

查看题集 →

怎么量化你的 RAG 效果?

相关题目

4