岗位职责
- 产品迭代评估方案与用户满意度量化
- 跟随千问APP产品能力迭代节奏，针对新功能、新场景制定对应的评估方案和评分标准，明确评估维度和指标，并选择最合适的评估方法（自动评测、人工评估、众测、A/B实验等），兼顾效率与准确性；
- 建立人工评估结果与线上众测数据、实验指标（留存率、使用率、满意度评分等）的对齐机制，确保离线评估结论能有效预测线上用户体验，将主观体验转化为可追踪、可对比的量化指标，支撑产品决策；
职位要求
- 有1年以上大语言模型评测、AI产品质量评估或相关领域工作经验优先
- 深入理解大语言模型的能力边界与常见评测范式，具备独立设计完整评测方案的能力
- 熟悉Agent/Agentic应用场景的评测方法，了解工具调用、多轮对话、任务规划等能力的评估要点
- 优秀的逻辑思维和结构化表达能力，能将评测发现转化为清晰的诊断报告和可执行建议
