岗位职责
- 制定所负责业务线的评测策略，与产品、算法目标对齐，明确评测优先级与节奏；
- 设计并维护评测标准与Rubrics体系，建立科学、可量化的评估框架；
- 产出深度评测报告与Bad Case归因分析，输出可落地的改进建议，驱动产品迭代；
- 开展评测数据洞察与Insight分析，从评测结论中提炼业务价值与趋势判断；
- 组织行业专家参与评测，把控人评质量，推动专家逆序率持续下降
职位要求
- 本科及以上学历，专业不限，计算机语言学、人工智能优先；
- 1年以上大模型评测或NLP质量评估经验，有垂域评测经验优先；
- 具备评测集设计、标注规范制定与质控的完整经验；
- 较强的数据分析与报告撰写能力，能将评测结论转化为业务语言；
- 具备行业专家资源组织经验，能独立开展主观评测活动；
- 良好的跨团队协作能力，能与产品、算法团队高效沟通并建立信任
