ATH-AI创新事业部-AI Coding Agent专家(评测/数据分析/Agent方向)-杭州

Company Alibaba

Focus Tech · Backend

Location 杭州

Published July 29, 2026

岗位职责

  1. 深入研究 AI Coding 场景下的上下文工程,设计并优化代码补全、对话式编程、代码审查等场景中的上下文构建策略,在提升模型输出质量的同时有效控制推理成本

  2. 设计和搭建面向产品效果与推理成本的评测框架与基准体系,涵盖白盒测试与多维度指标覆盖(代码补全准确率、上下文召回质量、Agent 任务完成率等),推动评测自动化与持续集成式质量监控

  3. 基于海量用户使用数据(补全接受率、编辑行为、会话模式等),进行深度分析与洞察挖掘,量化上下文策略对产品效果和成本的影响,驱动迭代方向

  4. 设计并执行 A/B 实验方案,评估上下文策略与功能迭代的实际收益,提供数据驱动的优化建议

任职要求

  1. 计算机科学、软件工程、人工智能、数据科学或相关专业本科及以上学历,硕士/博士优先

  2. 5 年以上相关工作经验,有 AI/NLP/代码智能领域的项目经验者优先

  3. 扎实的编程能力(Python 为主,熟悉 TypeScript/Go 等加分),熟练掌握至少一种深度学习框架(PyTorch/TensorFlow)

  4. 熟悉 LLM 的 Prompt Engineering、RAG 技术栈、向量检索、代码 AST 分析等至少两个方向

  5. 具备优秀的数据分析能力,熟练使用 SQL,有使用 Pandas/Spark 等工具处理大规模数据的经验

  6. 有独立设计评测体系或基准测试的经验,理解指标设计的科学性和工程可行性

  7. 良好的沟通协作能力,能够将技术分析结果清晰传递给不同角色的团队成员