招聘中 社招

Token效能治理架构师 - TikTok研发

字节跳动

  • 杭州、深圳
  • 后端

收录时间

部门介绍

TikTok研发团队,旨在实现TikTok业务的研发工作,搭建及维护业界领先的产品。加入我们,你能接触到包括用户增长、社交、直播、电商C端、内容创造、内容消费等核心业务场景,支持产品在全球赛道上高速发展;也能接触到包括服务架构、基础技术等方向上的技术挑战,保障业务持续高质量、高效率、且安全地为用户服务;同时还能为不同业务场景提供全面的技术解决方案,优化各项产品指标及用户体验。 在这里, 有大牛带队与大家一同不断探索前沿, 突破想象空间。 在这里,你的每一行代码都将服务亿万用户。在这里,团队专业且纯粹,合作氛围平等且轻松。目前在北京,上海,杭州、广州、深圳分别开放多个岗位机会。

  1. 设计Token效能治理的整体架构,覆盖采集、归因、分析、预算、优化、评测、告警与运营闭环;
  2. 建立统一指标体系,包括单请求Token、有效Token比例、缓存命中、上下文利用率、单位任务成本、单位效果成本及Token—时延—质量联合指标;
  3. 推动推理链路优化,包括Prompt压缩、上下文裁剪、KV Cache、Prefix Cache、动态批处理、模型路由、大小模型协同及推测解码等方向;
  4. 深入Agent工作负载,治理长上下文、工具调用、记忆注入、重复推理、失败重试与多轮交互中的Token浪费,建设成本归因和预算机制,将Token消耗下钻到业务、模型、场景、租户、版本及请求链路,支持预算控制与容量规划;
  5. 建立效果护栏和评测机制,确保Token优化不以任务成功率、回答质量、安全性或稳定性退化为代价;
  6. 牵引跨团队技术规划,沉淀平台能力、接入规范、最佳实践和治理SOP,推动重点业务规模化落地,识别行业技术演进对成本与架构的影响,形成中长期技术路线和关键技术预研。

岗位职责

招聘官网暂未提供完整岗位职责,请前往官网核实。

职位要求

  1. 计算机相关专业本科及以上学历,具备扎实的分布式系统、在线服务或AI基础设施经验;
  2. 5年及以上系统架构经验,主导过跨团队、跨链路的性能或成本治理项目;
  3. 熟悉大模型推理链路,理解Transformer、Tokenizer、Attention、KV Cache、Batching、量化及模型并行等核心机制;
  4. 能够从业务目标出发建立指标和归因模型,并用数据定位问题、验证收益、推动工程决策;
  5. 具备较强的架构抽象、技术规划与项目推动能力,能够协调模型、平台、数据与业务团队完成复杂落地;
  6. 对成本敏感,能同时处理效果、吞吐、时延、资源与研发复杂度之间的取舍。 加分项:
  7. 有LLM推理引擎、模型服务平台、AI Gateway、Agent平台或FinOps建设经验;
  8. 有长上下文优化、语义缓存、模型路由、Prompt工程或LLM评测体系实践;
  9. 有GPU/异构算力资源效率治理、容量规划或成本优化经验;
  10. 有开源项目贡献、技术专利、论文或技术社区影响力。

有些机会,只在官网短暂出现

真正值得关注的岗位,常常只在企业官网短暂开放,可能两三天后就下线,也未必会同步到综合招聘平台。没有持续关注,你甚至不会知道它曾经出现。职先机持续聚合并核验官网岗位,帮你抓住职场先机,快人一步。

微信小程序 / 当前岗位

在微信里继续看这个岗位

字节跳动Token效能治理架构师 - TikTok研发

扫码直达当前岗位收藏、浏览记录和下线提醒留在微信里
电脑端可直接微信扫码;手机端可保存小程序码后在微信中识别。
微信扫码在职先机小程序查看Token效能治理架构师 - TikTok研发正在准备岗位码
职先机微信小程序一岗一码 · 正式版直达保存小程序码

岗位提醒 · 01

收藏当前岗位,下线及时通知

当前岗位Token效能治理架构师 - TikTok研发字节跳动 · 杭州、深圳

01

扫码进入当前岗位无需重新搜索,直接打开当前岗位详情。

02

收藏并开启提醒在小程序内收藏后,岗位下线或变化时及时通知。

03

继续查看相似机会原岗位变化时,可继续浏览相关在招岗位。

职先机会持续核验公开岗位;岗位状态与最终招聘结果仍以企业招聘官网为准。

微信小程序扫码打开当前岗位

扫码打开当前岗位,完成收藏并开启下线提醒。

微信扫码在职先机小程序收藏Token效能治理架构师 - TikTok研发正在准备岗位码

微信小程序 · 当前岗位

请前往微信小程序提交内推申请

字节跳动Token效能治理架构师 - TikTok研发社招 · 杭州、深圳

01进入当前岗位扫码或打开后直达本岗位内推申请页。

02提交 PDF 简历简历替换、处理进度和消息提醒在小程序内同步。

手机端将尝试直接打开微信;电脑端请使用微信扫码。

微信扫码进入Token效能治理架构师 - TikTok研发内推申请页正在准备岗位码
当前岗位专属码扫码后无需重新搜索岗位保存小程序码

内推提示

暂不支持该岗位内推

如需投递,建议前往官网进行投递。