岗位职责
- 负责智能客服效果和安全指标体系的设计，从多个维度定义可量化的“好AI Agent”的标准；
- 建立AI原生的评估与Ground Truth体系，让AI在标注和测试集建设中起到决定性作用，提升AI评估的可拓展性，持续提升AI评估的准确率；
- 设计科学的抽样与评估方法，确保评估结果真实反映线上用户分布与痛点，并在合理范围内控制评估成本；
- 搭建由AI自动发现线上质量问题的系统与机制，打通“发现问题→定位原因→改进建议”的端到端闭环。
职位要求
- 本科及以上学历，3年以上AI产品经理/策略产品经理工作经验；
- 具备扎实的指标设计与度量方法论功底，能够将模糊的体验目标拆解为可统计、可定目标的量化标准；
- 熟悉抽样、实验评估等数据方法，具备良好的数据敏感度与分析能力；
- 优秀的跨团队沟通与推动能力，能够在多方协作和复杂约束下推动方案落地。 加分项
- 有AI评估相关经验（如LLM-as-a-Judge、标注体系搭建、Ground Truth建设）；
- 有客服、内容安全、用户体验度量或相关To-User业务背景；
- 有在多地区/多合规环境下设计数据方案的经验。
