质量×数据 · AI 新职业
模型评测工程师
设计测试集、评分标准和自动评测,判断 AI 是否真的变好。
- 01定义质量指标
- 02构建评测样本
- 03分析失败模式和回归
统计与实验数据处理领域知识模型基础
Python评测框架标注平台数据仓库
为一个 AI 应用建立 100 条有代表性的评测集并分析改进。
说明如何避免用一个分数掩盖严重失败。
评测工程师 → AI 质量负责人 → 模型/产品研究
需要大量细致工作,也需要和产品、研究、业务共同定义“好”。
推荐学习路线 · 12 周
打开路线并记录进度 →AI 评测与治理路线
最终作品:完成一套可执行的 AI 上线门槛