岗位职责
- 研发针对各AI训推业务的缓存加速系统，充分利用HBM、NVMe SSD等计算集群的高速存储介质及RDMA通信带宽，提高AI训推计算效率与性能，为集团AI业务的端到端的io性能、稳定性负责。
- 在持久化存储基础上，利用计算集群的存储介质建设统一的日志文件系统。
- 通过对文件存储层进行完善，强化文件系统存储能力，改善存储空间和数据读写速度，推动提高计算效率与性能。
职位要求
- 熟悉大语言模型、生成式AI模型的训练、推理的I/O 特性及对存储系统的需求。
- 熟悉大数据系统、机器学习系统领域内业界主流的持久化存储及缓存系统，如hdfs、alluxio等，了解其中的关键设计和实现，有相关系统的研发经验。
- 有针对大语言模型等自回归算法的分布式缓存、显存加速系统的研发经验优先。
