Alibaba logo
阿里巴巴
业务技术-AI应用研发工程师-用户质量

业务技术-AI应用研发工程师-用户质量

发布于 2 小时前

普通员工/个人贡献者

AI 估算 · 3.0–5.5万 · AI 参考估算
中级经验
本科
全职员工仅现场办公AI算法
AI算法
Agent评测
Ai Native
Benchmark构建
C端业务
效果优化
知识库建设

值不值得投

75综合评分

综合评分 75

AI原生质量工程核心岗,前沿Agent与评测空间大,WLB信息未披露

从薪资福利、成长发展、工作生活和使命价值四个维度综合评估,方便横向比较。

薪资怎么样

4.3万

比AI算法中位数低

发布情况

新岗位 · 今天发布

公司情况

这家公司招聘很活跃

约 5110 个在招 · 其中AI算法 96 个

市场机会

选择面较广

杭州 · AI算法 · 约 110 个在招

职位详情

关于这个职位

该岗位面向淘天集团核心C端业务,负责将传统质量保障体系升级为AI原生质量工程体系

你将参与质量Agent、评测集、知识库和工具链建设,用AI重新定义端到端质量交付方式,并直接影响亿级用户产品的体验质量

最低要求

年以上工作经验,计算机、软件工程、信息管理、数学、统计等相关专业本科及以上学历,硕士及以上优先

有Agent应用研发经历,具备Agent搭建、效果优化并实际落地取得效果的经验,对质量Agent方向感兴趣
有C端&B端 Agent功能和效果评测经验,有通过评测归因并反哺优化带来业务效果提升的案例,具备业界前沿评测视野和探索经历,对Benchmark构建,元评测等领域有深入见解

工作职责

端到端质量交付Agent建设与落地,按业务域定制的质量Agent,与研发Agent对接,实现AgentTeam工作模式

负责质量Agent的搭建,包括核心工具、skill、知识和评测,以及Agent效果优化
Agent评测,定义Agent质量标准,评测数据集和规则构建,执行,归因与报告产出,并通过评测反哺优化算法,带来业务的增量提升

优先资格

硕士及以上优先

AI 洞察

优缺点分析

优点

  • 岗位处于AI Native质量工程转型主线,能参与从零搭建新范式,技术探索空间较大
  • 覆盖淘天集团核心C端业务,场景复杂、用户规模大,能积累高价值的大流量质量基建经验
  • 工作内容结合Agent研发、评测、知识库和业务质量保障,技术栈和职业能力边界较宽
  • 团队明确提出质量Agent、AgentTeam、Benchmark和元评测等方向,适合希望深耕AI应用评测与落地的工程师
  • 从传统测试团队向AI原生质量工程团队重构,意味着需要适应快速变化的技术路线和组织工作方式

缺点 / 挑战

  • 质量Agent要服务多个核心业务域,业务链路复杂,评测标准和效果归因可能存在较高设计难度
  • 岗位要求既有Agent落地经验,又有前沿评测视野,对候选人的技术深度和业务理解都提出较高要求

角色解读

  • 可沿着AI应用研发工程师、AI质量工程专家、Agent平台架构师方向发展,深入质量Agent和研发Agent协同体系
  • 未来可向AI评测负责人、质量基建技术负责人或AI Native工程方法论负责人演进,主导团队级技术范式升级
  • 由于覆盖核心C端业务,也有机会成长为懂业务、懂质量、懂AI Agent的复合型技术专家
  • 建设面向不同业务域的质量交付Agent,让Agent能够参与端到端质量保障流程,并与研发Agent协同形成AgentTeam工作模式
  • 负责质量Agent的核心工具、skill、知识库、评测体系搭建,并持续优化Agent在真实业务场景中的效果
  • 设计Agent评测标准、评测数据集和规则,执行评测、归因分析并输出报告,用评测结果反哺算法和产品质量提升
  • 围绕淘宝首页、搜索、推荐、消息社交、内容平台、互动平台等核心C端业务,支撑亿级用户链路的质量基建升级
  • 需要具备Agent应用研发经验,熟悉Agent搭建、工具调用、知识库组织、skill设计和效果优化流程
  • 需要掌握Agent功能与效果评测方法,能够构建Benchmark、评测集、评测规则,并进行归因分析和优化闭环
  • 需要理解质量工程与软件研发流程,能够将传统测试、质量保障能力与AI原生工作流结合
  • 需要较强的工程实现能力和业务抽象能力,能把复杂C端业务场景转化为可落地的Agent能力和评测标准

申请策略

  • 面试前建议了解淘天核心C端业务的质量挑战,如首页、搜索、推荐、内容平台和互动链路的复杂场景
  • 沟通时突出你不仅会搭建Agent,也能定义评测标准、解释效果归因,并通过评测推动业务增量提升
  • 重点突出你参与过的Agent应用研发项目,包括Agent架构、工具调用、skill设计、知识库建设和最终落地效果
  • 强调Agent评测相关经验,如评测集构建、Benchmark设计、评测规则、归因分析和反哺优化带来的业务提升
  • 展示你对质量工程的理解,尤其是端到端质量保障、测试基建、研发流程协同或质量平台建设经历
  • 用量化结果呈现项目价值,例如评测准确率提升、缺陷发现效率提升、人工成本降低或业务质量指标改善
  • 提前准备Agent评测体系设计能力,包括评测维度、数据集构建、评分规则、人工校准和自动化评测流程
  • 补充质量Agent相关实践,理解如何将测试工具、知识库、业务规则和研发Agent协同起来

面试指南

  • 项目类问题采用“背景-目标-架构-关键难点-量化结果-复盘”的结构,重点说明Agent如何落地以及如何产生业务价值
  • 评测类问题采用“评测目标-数据集-指标体系-执行流程-归因方法-优化闭环”的框架,体现系统化评测思维
  • 方案设计类问题先澄清业务场景和约束,再给出分层设计,包括工具层、知识层、Agent编排层、评测层和反馈优化层
  • 请介绍一个你实际落地过的Agent应用项目,它的架构、核心工具、知识库和效果优化方式是什么?
  • 如何为一个质量Agent设计评测体系?你会如何构建评测集、定义指标并进行归因分析?
  • 你如何理解Benchmark和元评测?它们在Agent效果优化中分别解决什么问题?
  • 如果质量Agent与研发Agent协同工作,你认为AgentTeam模式中的职责边界和交互协议应如何设计?
  • 面对淘宝首页、搜索、推荐等复杂C端业务,如何判断质量Agent是否真正带来了业务增量?

职位点评

薪资福利78
成长发展90
工作生活50
使命价值76

薪资福利

78中等

JD未披露薪资与福利信息,但岗位要求较高的Agent研发与评测能力,且属于核心业务质量基建方向,薪酬吸引力可能具备竞争力。

薪资信号未披露(AI估算:3.0千–5.5万/月)

成长发展

90较高

岗位明确处于从测试团队到AI原生质量工程团队的重构过程,涉及Agent搭建、评测、知识库和前沿评测探索,成长空间突出。

技术前沿前沿/新兴技术
技术栈Agent、质量Agent、AI Native、AgentTeam、Benchmark、元评测、评测数据集、知识库
业务类型ambiguous

工作生活

50较低

JD仅明确地点为杭州,未提及远程、弹性、双休或加班信息,因此生活化动机满足程度无法充分判断。

工作模式未明确
办公地点未明确
加班情况未提及(无法判断)

使命价值

76中等

岗位服务于亿级日活用户的核心C端业务,质量基建升级会直接影响产品体验,但JD未直接表达社会使命或公共价值导向。

行业发展高速增长赛道
社会影响中性/一般
创新程度开拓性创新(行业首创)
Watch Jobs