岗位职责
- 负责语音助手 Voice Agent 模型能力与效果迭代,结合用户需求、业务目标及模型能力边界,制定任务执行策略与效果标准;
- 负责多轮对话中的任务执行策略设计,包括意图理解、需求澄清、任务规划、工具选择与调用、执行结果理解及回复,提升任务完成率与执行准确性;
- 制定异步任务执行及对话协同策略,支持执行期间的继续对话、条件补充与变更、任务取消、进度反馈和结果回告,优化任务中断、失败及超时后的处理策略;
- 负责语音助手对话与记忆策略,结合不同用户画像和任务上下文,优化回复长度、用词、引导方式,以及长期记忆的写入、调用与更新,提升对话与任务执行效果;
- 建设模型效果评测体系,制定评测标准与 Rubrics,构建专项评测集;结合任务完成率、工具调用准确性、响应时延等指标,分析模型能力边界并定位核心问题;
- 负责模型训练数据建设,包括数据需求分析、样本构造、标注规范制定及质量管理;结合线上日志、用户反馈与评测结果,持续完善训练数据与评测数据;
- 与算法、工程及评测团队紧密协作,通过 Prompt 优化、训练数据优化及线上实验,推动策略设计、模型训练、效果评测和线上验证形成迭代闭环;探索自动评测、LLM Judge 等方法,提升迭代效率。
职位要求
- 本科及以上学历,3 年及以上 AI 产品、模型策略或模型效果相关工作经验,具备 Agent 或大模型应用效果优化经验;
- 熟悉 Agent 核心能力,理解任务规划、工具调用、多轮任务执行、上下文管理及记忆机制,能够结合模型能力与限制制定有效策略;
- 具备复杂任务策略设计能力,能够系统分析任务执行中的条件变更、并发、中断、取消及异常恢复等问题,并推动模型效果优化;
- 熟悉 Prompt Engineering,能够独立完成 Prompt 调试、效果验证及问题分析;理解 Prompt、训练数据与模型训练等不同优化手段的适用场景;
- 具备模型评测经验,能够独立完成评测标准制定、评测集建设、结果分析及模型能力评估;
- 具备训练数据建设及数据分析能力,能够从线上日志、用户反馈和评测结果中定位问题,转化为明确的策略与数据优化方案;
- 具备优秀的项目推动及跨团队协作能力,能够与算法、工程及评测团队共同推进模型持续迭代。