岗位职责
- 调研行业内评测方案,引入前沿自动评估方法,持续提升评测自动化水平;
- 设计并沉淀横向可复用的Judge方案,建立Judge开发规范与质量标准;
- 主导自动化评测平台建设,搭建评测流水线,支持版本对比、自动归因等核心能力;
- 推动自动评估与人评、众测的组合编排,构建可配置的评估流水线;
- 建立自动评估质量监控体系,持续优化人机一致率和Judge准确率
职位要求
- 本科及以上学历,计算机科学、软件工程等相关专业,硕士优先;
- 1年以上AI评测平台或AI工具链产品开发经验;
- 熟悉Judge/Harness等自动评估技术架构,了解人机一致性校准机制;
- 具备平台产品规划能力,能独立完成需求分析、方案设计与项目推进;
- 较强的技术理解力,能与算法团队高效协作,推动技术方案落地;
- 有评测平台或数据平台建设经验优先,具备系统性思维和工程化能力