岗位职责
负责蚂蚁集团语言大模型的评测算法研究与应用，搭建业界领先的大模型评测体系，精准全面地评估大模型的能力。基于AIGC等技术建设高质量评测数据集，与业界公开评测集有机结合，深入大模型预训练、后训练、深度思考等各个阶段，利用大模型等技术提高评测效率和准确性，通过高效高质量评测提升语言大模型、垂域大模型的能力和用户体验。
职位要求
- 硕士及以上学历，计算机科学、人工智能、软件工程、数学等相关专业；
- 具备扎实的机器学习算法基础，熟悉语言大模型的基本理论和算法；
- 具备扎实的工程能力，熟练掌握 Python 编程，能高效进行代码开发和调试；
- 具有良好的学习和沟通能力，有好奇心和责任心，具有钻研精神；
- 具有大模型评测等相关经验，熟悉常见的大模型评测 Benchmark 和评测方法者优先；
- 在 NeurIPS、ICML、ICLR、KDD、SIGIR 等国际高水平学术会议发表过论文者优先。
