大语言模型评测研究实习生-Seed

日常实习：面向全体在校生，为符合岗位要求的同学提供为期3个月及以上的项目实践机会。 团队介绍：字节跳动 Seed 团队成立于 2023 年，致力于寻找通用智能的新方法，追求智能上限，为科技和社会发展作出贡献。 Seed 团队在 AI 领域拥有长期愿景与决心，团队研究方向涵盖 MLLM、GenMedia、AI for Science、机器人等，在中国、新加坡、美国等地设有实验室和岗位。目前，团队已推出业界领先的通用大模型以及前沿的多模态能力，支持豆包、即梦、TRAE 等超过 50 个应用场景，并通过火山引擎开放给企业客户。第三方数据显示，豆包 App 用户量在中国市场排名第一，豆包大模型日均 Token 调用量行业领先。 1、探索模型在预训练阶段与后训练阶段的内在一致性，跨训练阶段预测模型性能上限； 2、探索从可解释性角度提出更多更深入的基于模型内在机理的评测标准； 3、提出更好的Benchmark，定义模型能力，定义AGI； 4、从评测角度对模型进行红队测试，找到模型的短板并针对性提出模型改进； 5、探索全新的模型和智能应用，如Agent Foundation Model、DeepResearch所需的评测基准。 【任职要求】 1、硕士及以上学位在读； 2、聚焦问题本质，从第一性原理思考问题； 3、对模型评测和定义AGI充满兴趣； 4、有大模型训练或模型评估研究经验，且持有相关论文优先。