岗位职责
- 负责抖音直播实时互动相关的多模态内容理解工作,打造业界领先的多模态内容理解大模型;
- 基于CNN、VLM等技术推进模型训练、微调、评测及高效部署,推动模型在下游业务上的应用,包括并不限于多模态对话、多模态互动内容生成、Caption文本生成等,助力业务规模应用落地;
- 规划实现并优化海量多模态数据的预处理、清洗、标注、特征提取及高效融合方法。
职位要求
- 本科及以上学历,计算机相关专业;
- 在计算机视觉/多模态某领域有深入的研究或项目经验,在顶级学术会议有论文发表者或获得竞赛优胜者优先;
- 熟悉多模态大模型(VLM)、大语言模型(LLM)、RL相关的算法技术,熟悉大模型相关的数据构造方法、Post Training算法,对多模态数据处理具备优秀的独立开发与调试能力;
- 有大规模模型训练、压缩、蒸馏、微调等经验,熟悉Megatron、Deepspeed等框架者优先;
- 对视觉CoT有研究经验者优先,对类GPT-4o实时对话的多模态流式计算有落地经验者优先;
- 优秀的分析和解决问题的能力,对解决具有挑战性的问题充满激情,良好的沟通和团队合作能力。