评估与全局观:怎么量化 Agent 好坏、落地最大挑战

题集来源:Onefly(ranxi2001)收录项目:zero2Agent查看原题集

题目目录

55 道原题
  1. 怎么理解 Vibe Coding?你有哪些实践经验?

    原题
  2. 如何衡量 Agent 的 Planning 能力 vs Hallucination Rate?请列举具体的量化评估指标或自动化评估框架

    原题
  3. 设计一个电商客服 Agent 的评测方案——商品咨询、售后处理、投诉安抚三类任务如何分别评估?

    原题
  4. 用户在线反馈怎么收集?不同模型和 Prompt 的 AB 测试怎么设计?

    原题
  5. AI 写代码越来越强,算法工程师的角色会怎么变?

    原题
  6. 哪些类型的 Agent 产品在未来 2 年内最可能被淘汰?

    原题
  7. 线上 log 是海量的,怎么转化成有限的线下评测集?随机抽样为什么不行?

    原题
  8. RAG 召回链路的监控怎么做?怎么判断召回漂移?

    原题
  9. 你怎么看 Agent 后续的发展?哪些场景你觉得更容易落地?

    原题
  10. 面试最后的反问环节,怎么提出有深度的问题?

    原题

    本条讨论准备反问的方法,未记录候选人的具体反问。