返回面试题库
eval-observability中级

AI 应用的评估指标应该怎样选?

MetricsEval
30 秒回答

从业务成功条件反推指标,同时覆盖质量、拒答、安全、延迟和成本。

完整回答

可确定的格式、引用、工具参数优先用规则;语义质量用人工标注或校准后的模型评分。总分不能掩盖关键安全失败,应设置分项阈值和发布门禁。

加分信息

  • 主动给出可量化的验证指标
  • 能结合失败案例说明取舍

常见问题

  • 只背定义,不说明工程边界
  • 只讲理想流程,不处理异常路径

面试官可能追问

项目连接

结合 RAG 项目设置 recall、忠实度、P95 和成本阈值。