晓天衡宇-大模型标注评测工程师-电商

1. 负责电商、对话、多模态方向 AI 训练数据（SFT / RL 阶段）的标注管理与质检；与算法、产品团队协作，理解 RM 训练与 rollout 打分的数据诉求，交付高质量数据。 2. 导购与对话 Agent、评测集构建、多轮对话 / 长程任务理解、用户意图理解分类、面向商品理解 / 类目属性、搜索相关性等场景，设计标注与质检流程，持续优化 rubric 与 verifier，推动双标一致率等核心指标达成。 3. 统筹本方向评测方案与数据生产方案，制定可操作标准，定期开展双向抽检，迭代标注规范。 4. 构建并维护数据质量管理体系，对轨迹根因归因负责，警惕分数虚高等隐性风险。 5. 管理标注专家团队，统筹任务与产能；与上下游充分协作，把个人判断力沉淀为团队方法论。 【任职要求】 1. 本科及以上，具备30人以上的标注人员管理经验，对标注质量审核、人员提效、Agent自动化等方面有较深的理解，有电商等方面的经验加分。 2. 对标注质量与 reward signal 分布敏感，能通过科学方法发现问题、推动业务指标达成。 3. 熟悉数据标注工具与质检平台，掌握 Python，能做抽检统计与一致性分析；了解 reward modeling 基本概念。 4. 具备团队管理与跨团队协作能力，思维严谨，判断都能指向具体证据。