蚂蚁集团-大模型算法评测-蚂蚁星河

1.按照产品架构和业务要求，设计覆盖功能及非功能需求，AI大模型应用、智能引擎、算法服务的产品质量保障。 2.测试能力建设：解决测试复杂技术问题，开发适配大模型及算法服务的测试工具与平台。 3.研究测试新技术方法，推进AI算法评测、AI原生应用测试能力升级;攻克算法领域特有质量难题（精度验证、AB实验评估、幻觉检测等）。 4.结合AI行业发展趋势，制定技术团队的合适的质量发展规划，与算法、工程、产品团队紧密协作，深入理解AI模型能力和边界；推动质量技术左移及需求迭代全栈。 【任职要求】 1.三年以上互联网或传统行业开发测试及质量保障经验；一年以上AI大模型/算法类产品测试经验（大模型/推荐/搜索/NLP系统等）优先。 2.对软件质量保障有体系化思考和实践经验，能应对复杂系统的质量挑战。熟悉大模型应用测试场景：精通至少一个测试领域（自动化测试/性能测试/安全测试）;熟悉主流AI技术栈，熟练使用Python/Java/go/sql等编程语言.有测试工具平台开发经验，具备工程化能力。 3.具备算法评测基础知识，熟悉评测指标,了解badcase分析及评测数据集构建方法,了解模型应用skill，agent，MCP，prompt，loop等技术体系，能设计针对特定场景下大模型应用的合适的工程能力。 4.对新事物有强烈求知欲、有创新精神，乐于和热于技术钻研。