大模型Pre-train算法研究员/工程师

【岗位描述】 1、负责Model Architecture的研发、优化和创新，包括Attention、MoE等架构的改进，以及全新架构的探索。 2、负责下一代预训练范式的研究和创新，推动该技术的Scale up。 3、从算法的角度推动大模型训练和推理的低成本化，包括优化器的改进、量化、投机采样等技术。 4、研究通用智能的本质，设计和迭代通用智能的评估和观测方法，从而指导下一代范式的演进。 5、 负责大语言基座模型代码、数学、Reasoning能力的提升，系统性的增强模型的能力，实现数据飞轮。 【任职要求】 1、有独立研究能力，曾发表机器学习或相关领域的一作论文。 2、具备扎实的编程基础和优秀的工程能力，能够独立实现相关算法和实验。 3、具有大模型领域的实习或科研经验者优先。 4、 具备良好的团队协作能力和沟通能力。