Evaluation Harness 面试问答

题集来源:阿东玩 AI(Adong)收录项目:AgentGuide查看原题集

题目目录

8 道原题
  1. 什么是 Evaluation Harness?和 Benchmark 有什么区别?

    原题
  2. 为什么 Agent 评估比传统 LLM 评估更难?

    原题
  3. 如何处理 Agent 评估中的非确定性问题?

    原题
  4. 什么是 LLM-as-Judge?有什么优缺点?

    原题
  5. 如何设计一个 Agent 评估用例?

    原题
  6. 如何将评估集成到 CI/CD?

    原题
  7. 你用过哪些评估工具?各有什么优缺点?

    原题
  8. 如何评估一个 RAG 系统?

    原题