招聘中 社招

大模型推理调度编排专家-Seed

字节跳动

  • 杭州
  • 机器学习

收录时间

部门介绍

字节跳动Seed团队成立于2023年,致力于寻找通用智能的新方法,追求智能上限,为科技和社会发展作出贡献。 Seed团队在AI领域拥有长期愿景与决心,团队研究方向涵盖MLLM、GenMedia、AI for Science、机器人等,在中国、新加坡、美国等地设有实验室和岗位。目前,团队已推出业界领先的通用大模型以及前沿的多模态能力,支持豆包、即梦、TRAE等超过50个应用场景,并通过火山引擎开放给企业客户。第三方数据显示,豆包App用户量在中国市场排名第一,豆包大模型日均Token调用量行业领先。

  1. 负责海量大模型异构资源的调度编排、算力池化、弹性资源混布、潮汐资源拆借和Quota管理;
  2. 负责大模型推理服务的多角色、多阶段、PD分图/EP调度,KV Cache centric调度,实现动态、及时、准确的扩缩容管理;
  3. 负责通过技术手段实现计算资源、RDMA高速网络资源、缓存/存储资源的最优编排,充分发挥大规模分布式集群算力;
  4. 负责大模型服务的稳定性,通过线上和线下的多系统联动,实现在多种异构资源(GPU、CPU、其他异构硬件)、多云环境、多种网络流量场景的问题定位、诊断、隔离和快速恢复;
  5. 负责多机房、多地域、多云场景的在离线任务/服务调度,实现负载的合理化分布。

岗位职责

招聘官网暂未提供完整岗位职责,请前往官网核实。

职位要求

  1. 熟练掌握Linux环境下的C++/Go/Python/Shell等1至2种以上语言;
  2. 熟悉Kubernetes架构和生态,熟悉Docker/Containerd/Kata/Podman等容器技术,有丰富的机器学习系统实践和开发经验;
  3. 掌握分布式系统原理,参与过分布式系统的设计、开发和维护;
  4. 有优秀的逻辑分析能力,能够对业务逻辑进行合理的抽象和拆分;
  5. 有强烈的工作责任心,较好的学习能力、沟通能力和自驱力,能够快速的响应和行动;
  6. 有良好的工作文档习惯,及时按要求撰写更新工作流程及技术文档。 加分项:
  7. 熟悉至少一种主流的机器学习框架/推理引擎(例如vLLM/SGLang/PyTorch);
  8. 有大模型资源调度/服务编排的落地经验;
  9. 熟悉了解GPU系统/体系结构;
  10. 在计算机系统顶会(包括但不限于OSDI/NSDI/SOSP/FAST/Eurosys)上有文章发表经验。

相似岗位

有些机会,只在官网短暂出现

真正值得关注的岗位,常常只在企业官网短暂开放,可能两三天后就下线,也未必会同步到综合招聘平台。没有持续关注,你甚至不会知道它曾经出现。职先机持续聚合并核验官网岗位,帮你抓住职场先机,快人一步。

微信小程序 / 当前岗位

在微信里继续看这个岗位

字节跳动大模型推理调度编排专家-Seed

扫码直达当前岗位收藏、浏览记录和下线提醒留在微信里
电脑端可直接微信扫码;手机端可保存小程序码后在微信中识别。
微信扫码在职先机小程序查看大模型推理调度编排专家-Seed正在准备岗位码
职先机微信小程序一岗一码 · 正式版直达保存小程序码

岗位提醒 · 01

收藏当前岗位,下线及时通知

当前岗位大模型推理调度编排专家-Seed字节跳动 · 杭州

01

扫码进入当前岗位无需重新搜索,直接打开当前岗位详情。

02

收藏并开启提醒在小程序内收藏后,岗位下线或变化时及时通知。

03

继续查看相似机会原岗位变化时,可继续浏览相关在招岗位。

职先机会持续核验公开岗位;岗位状态与最终招聘结果仍以企业招聘官网为准。

微信小程序扫码打开当前岗位

扫码打开当前岗位,完成收藏并开启下线提醒。

微信扫码在职先机小程序收藏大模型推理调度编排专家-Seed正在准备岗位码

微信小程序 · 当前岗位

请前往微信小程序提交内推申请

字节跳动大模型推理调度编排专家-Seed社招 · 杭州

01进入当前岗位扫码或打开后直达本岗位内推申请页。

02提交 PDF 简历简历替换、处理进度和消息提醒在小程序内同步。

手机端将尝试直接打开微信;电脑端请使用微信扫码。

微信扫码进入大模型推理调度编排专家-Seed内推申请页正在准备岗位码
当前岗位专属码扫码后无需重新搜索岗位保存小程序码

内推提示

暂不支持该岗位内推

如需投递,建议前往官网进行投递。