招聘中 实习

【2027校招】多模态基础模型算法工程师

小红书

  • 北京市,上海市

收录时间

岗位职责

构建多模态大模型“感知-推理-交互”的全链路能力,定义小红书下一代多模态智能基座。你将主导多模态大模型从持续预训练(CPT)、中期训练(Mid-training)、监督微调(SFT)、强化学习(RL)到在线策略蒸馏(OPD / MOPD)的全流程训练与架构演进,并赋能点点、搜索、广告、推荐、电商、智能创作等业务场景。

  1. CPT & Mid-training:负责 VLM 的持续预训练与中期训练,注入垂域知识、缓解灾难性遗忘,通过原生分辨率、长上下文扩展与数据配比(Data Mixing)夯实模型基础能力;
  2. SFT & Alignment:负责 VLM 的 SFT 与高质量多模态指令数据构建,治理模型幻觉,提升指令遵循鲁棒性;
  3. Reasoning & RL:主导 VLM 的强化学习流程,并构建多模态 Reward Model,探索 Long-thought 推理范式,提升复杂视觉、数学、逻辑及长视频序列下的深度推理能力;
  4. OPD & MOPD:在 RL 之后引入在线策略蒸馏,与多专家在线策略蒸馏,将多个专家模型能力高效融合蒸馏至统一基座,兼顾多任务能力与推理效率;
  5. 超长视频理解:研发高效的长视频编码、视觉 Token 压缩与时空注意力机制,优化多帧推理效率,挖掘视频与直播流的时序及交互语义;
  6. 多模态 Agent:研发具备视觉反馈与自我修正能力的智能体,构建 VLM 工具调用与任务规划、执行、验证闭环。

职位要求

  1. 本科及以上学历,计算机、人工智能、数学等相关专业;
  2. 深入理解 Transformer 架构与大模型训练全流程(CPT / Mid-train / SFT / RL / OPD),熟悉主流 VLM 架构(如 LLaVA、Qwen-VL、InternVL 等);
  3. 在大规模预训练、CPT、Mid-training、SFT、RL、在线策略蒸馏(OPD / MOPD)、MLLM 推理优化、视觉对齐或视频理解等方向有深入研究或落地经验;
  4. 精通 PyTorch,熟悉 Megatron-LM、DeepSpeed 等分布式训练框架,具备百亿/千亿级参数模型的大规模训练经验,熟悉 veRL、OpenRLHF 者优先;
  5. 对多模态数据的构建、清洗及 Data Mixing 策略有独特见解,理解各训练阶段的数据需求差异;
  6. 熟悉主流多模态评测集,能构建垂直领域 Benchmark,并以评测结果反向驱动数据与算法迭代。 【加分项】:
  7. 在 CVPR、ICCV、ECCV、NeurIPS、ICML、ICLR、ACL 等顶会发表过高影响力论文,或在知名开源多模态项目中有核心贡献。

相似岗位

有些机会,只在官网短暂出现

真正值得关注的岗位,常常只在企业官网短暂开放,可能两三天后就下线,也未必会同步到综合招聘平台。没有持续关注,你甚至不会知道它曾经出现。职先机持续聚合并核验官网岗位,帮你抓住职场先机,快人一步。

微信小程序 / 当前岗位

在微信里继续看这个岗位

小红书【2027校招】多模态基础模型算法工程师

扫码直达当前岗位收藏、浏览记录和下线提醒留在微信里
电脑端可直接微信扫码;手机端可保存小程序码后在微信中识别。
微信扫码在职先机小程序查看【2027校招】多模态基础模型算法工程师正在准备岗位码
职先机微信小程序一岗一码 · 正式版直达保存小程序码

岗位提醒 · 01

收藏当前岗位,下线及时通知

当前岗位【2027校招】多模态基础模型算法工程师小红书 · 北京市,上海市

01

扫码进入当前岗位无需重新搜索,直接打开当前岗位详情。

02

收藏并开启提醒在小程序内收藏后,岗位下线或变化时及时通知。

03

继续查看相似机会原岗位变化时,可继续浏览相关在招岗位。

职先机会持续核验公开岗位;岗位状态与最终招聘结果仍以企业招聘官网为准。

微信小程序扫码打开当前岗位

扫码打开当前岗位,完成收藏并开启下线提醒。

微信扫码在职先机小程序收藏【2027校招】多模态基础模型算法工程师正在准备岗位码

微信小程序 · 当前岗位

请前往微信小程序提交内推申请

小红书【2027校招】多模态基础模型算法工程师实习 · 北京市,上海市

01进入当前岗位扫码或打开后直达本岗位内推申请页。

02提交 PDF 简历简历替换、处理进度和消息提醒在小程序内同步。

手机端将尝试直接打开微信;电脑端请使用微信扫码。

微信扫码进入【2027校招】多模态基础模型算法工程师内推申请页正在准备岗位码
当前岗位专属码扫码后无需重新搜索岗位保存小程序码

内推提示

暂不支持该岗位内推

如需投递,建议前往官网进行投递。