招聘中 社招

后端调度编排工程师 - Data AML

字节跳动

  • 北京、杭州、上海
  • 后端

收录时间

部门介绍

Data AML是字节跳动的机器学习中台,为抖音/今日头条/西瓜视频等业务提供推荐/广告/CV/语音/NLP的训练和推理系统。为公司内业务部门提供强大的机器学习算力,并在这些业务的问题上研究一些具有通用性和创新性的算法。同时,也通过火山引擎将一些机器学习/推荐系统的核心能力提供给外部企业客户。

  1. 负责分布式编排调度中的资源效能优化,通过工程手段,提升单位算力上支持的业务、模型规模: 1)使用/二次开发围绕Kubernetes/Godel生态的分布式调度框架,在不同的业务场景下合理选型,并依据不同场景的特点进行集群的利用率/均匀性的调度策略优化; 2)对接/扩展各类模型、业务的AutoScaling以及自动并行的工作;通过对不同模型的负载建模分析的方法,为模型的资源请求进行自动优化,规模化的优化资源使用效率,达到全局最优; 3)负责不同优先级服务的抢占/驱逐功能;负责不同集群不同类型资源间的拆借/混部对接工作;负责多机房、多地域、多云场景的调度/负载适配;
  2. 负责建设面向下一代超大超深推荐模型的训练系统架构: 1)围绕超大规模Embedding以及超大规模GPU同步训练建设弹性、鲁棒的分布式训练Runtime; 2)设计、优化面向未来推荐广告模型调研范式(e.g.RL、Finetune、蒸馏)的分布式计算API以及Runtime; 3)对接平台,优化分布式训练的可诊断性以及易用性;
  3. 负责建设面向下一代推荐系统的在线编排架构: 1)围绕超大规模Embedding的在线训练场景,构建健壮、稳定的分布式模型推理架构; 2)结合业务的调研实验模式,优化推荐广告模型在线架构的易用性和MLops流程。

岗位职责

招聘官网暂未提供完整岗位职责,请前往官网核实。

职位要求

  1. 熟练掌握Linux环境下的Go/Python至少1种编程语言,有良好的编程习惯及编码能力;
  2. 熟悉分布式系统原理,有机器学习系统相关实践和开发经验优先;
  3. 熟悉开源的分布式调度框架,诸如Kubernetes(K8s),Yarn(Flink,MapReduce),Mesos,Celery,对其中至少一种有实践积累者优先;
  4. 熟悉开源的分布式编排系统,例如veRL,vLLM,Ray,TFX,对其中至少一种有开发经验者优先;
  5. 有强烈的工作责任心,较好的学习能力、沟通能力和自驱力,能够快速的响应和行动。

有些机会,只在官网短暂出现

真正值得关注的岗位,常常只在企业官网短暂开放,可能两三天后就下线,也未必会同步到综合招聘平台。没有持续关注,你甚至不会知道它曾经出现。职先机持续聚合并核验官网岗位,帮你抓住职场先机,快人一步。

微信小程序 / 当前岗位

在微信里继续看这个岗位

字节跳动后端调度编排工程师 - Data AML

扫码直达当前岗位收藏、浏览记录和下线提醒留在微信里
电脑端可直接微信扫码;手机端可保存小程序码后在微信中识别。
微信扫码在职先机小程序查看后端调度编排工程师 - Data AML正在准备岗位码
职先机微信小程序一岗一码 · 正式版直达保存小程序码

岗位提醒 · 01

收藏当前岗位,下线及时通知

当前岗位后端调度编排工程师 - Data AML字节跳动 · 北京、杭州、上海

01

扫码进入当前岗位无需重新搜索,直接打开当前岗位详情。

02

收藏并开启提醒在小程序内收藏后,岗位下线或变化时及时通知。

03

继续查看相似机会原岗位变化时,可继续浏览相关在招岗位。

职先机会持续核验公开岗位;岗位状态与最终招聘结果仍以企业招聘官网为准。

微信小程序扫码打开当前岗位

扫码打开当前岗位,完成收藏并开启下线提醒。

微信扫码在职先机小程序收藏后端调度编排工程师 - Data AML正在准备岗位码

微信小程序 · 当前岗位

请前往微信小程序提交内推申请

字节跳动后端调度编排工程师 - Data AML社招 · 北京、杭州、上海

01进入当前岗位扫码或打开后直达本岗位内推申请页。

02提交 PDF 简历简历替换、处理进度和消息提醒在小程序内同步。

手机端将尝试直接打开微信;电脑端请使用微信扫码。

微信扫码进入后端调度编排工程师 - Data AML内推申请页正在准备岗位码
当前岗位专属码扫码后无需重新搜索岗位保存小程序码

内推提示

暂不支持该岗位内推

如需投递,建议前往官网进行投递。