晓天衡宇-大模型标注评测工程师-电商
Company Alibaba
Focus Tech · Algorithm
Location 杭州
Published August 3, 2026
岗位职责
- 负责电商方向 AI 训练数据(SFT / RL 阶段)的标注管理与质检;与算法、产品团队协作,理解 RM 训练与 rollout 打分的数据诉求,交付高质量数据。
- 面向商品理解 / 类目属性、搜索相关性、导购与对话 Agent、评测集构建等场景,设计标注与质检流程,持续优化 rubric 与 verifier,推动双标一致率等核心指标达成。
- 统筹本方向评测方案与数据生产方案,制定可操作标准,定期开展双向抽检,迭代标注规范。
- 构建并维护数据质量管理体系,对轨迹根因归因负责,警惕分数虚高等隐性风险。
- 管理标注专家团队,统筹任务与产能;与上下游充分协作,把个人判断力沉淀为团队方法论。
任职要求
- 本科及以上,具备 3 年以上电商领域从业或研究经历(商品运营、类目 / CPV、搜索相关性、导购等其一),能独立判断电商场景下内容与轨迹的质量。
- 对标注质量与 reward signal 分布敏感,能通过科学方法发现问题、推动业务指标达成。
- 熟悉数据标注工具与质检平台,掌握 Python,能做抽检统计与一致性分析;了解 reward modeling 基本概念。
- 具备团队管理与跨团队协作能力,思维严谨,判断都能指向具体证据。
岗位标签
NEW