官网职位描述
团队介绍:TikTok是一个覆盖150个国家和地区的国际短视频平台,我们希望通过TikTok发现真实、有趣的瞬间,让生活更美好。TikTok在全球各地设有办公室,全球总部位于洛杉矶和新加坡,办公地点还包括纽约、伦敦、都柏林、巴黎、柏林、迪拜、雅加达、首尔和东京等多个城市。 TikTok搜索团队团队依托TikTok独特的内容生态,探索大模型等前沿技术,为用户带来更好的搜索体验。致力于打造全球用户的优选搜索平台、All-in-one的全网信息整合、以及更流畅的用户交互体验。 1、负责Tako AI助手评测体系建设,覆盖问答、决策、任务执行及主动服务等核心场景,准确刻画产品体验并挖掘优化机会; 2、结合用户研究与数据分析,定义分场景体验理想态,建立端到端及关键链路的评估指标体系,并持续验证指标的有效性; 3、基于评测结果开展问题归因与优先级判断,协同算法、产品及运营团队推动策略优化,通过实验与反馈提升用户满意度与留存; 4、负责自动评估方案与评测工具的产品设计,推动评估标准、评测集及自动评估能力的迭代,保障评估的准确性与时效性; 5、持续跟踪AI助手与智能体(Agent)产品发展,探索记忆、个性化、工具调用等能力的评估方法,沉淀可复用的评测机制。
职位要求
- 本科学历及以上,具备AI产品、搜索、推荐或相关策略产品经验,深刻理解用户需求与模型能力的关系;
- 具备优秀的分析与抽象能力,能将复杂体验问题转化为清晰、可衡量的评估目标与指标;
- 具备扎实的数据归因能力,能结合离线评测、线上实验和用户反馈提出明确的优化方向;
- 理解大模型及智能体工作链路,具备自动评估相关认知,能够高效协同工程与算法团队落地方案;
- 逻辑清晰、沟通高效,具备项目推动力与自驱力,能在快速迭代的环境中主动定义并解决问题。 加分项
- 具有大模型或智能体评测体系建设、大模型作为裁判(LLM-as-a-Judge)或评测平台产品经验;
- 具有生活决策、个性化推荐、任务执行或主动服务相关业务背景。