阿里巴巴
阿里健康-大模型产品经理（评测方向）-杭州/北京
阿里健康-大模型产品经理（评测方向）-杭州/北京
发布于 1 小时前普通员工/个人贡献者
全职员工仅现场办公产品经理
产品经理
Ab测试
大模型评测
数据分析
算法评估
跨团队协作
值不值得投
80综合评分
综合评分 80
阿里健康核心AI产品岗，侧重前沿大模型评测，高成长性与社会价值并存，工作强度可能较大
从薪资福利、成长发展、工作生活和使命价值四个维度综合评估，方便横向比较。
薪资怎么样
3.5万
比产品经理中位数高
发布情况
新岗位 · 今天发布
公司情况
这家公司招聘很活跃
约 4440 个在招 · 其中产品经理 约 190 个
市场机会
选择面较广
杭州 · 产品经理 · 约 330 个在招
职位详情
关于这个职位
负责阿里健康大模型应用场景下的评测体系构建与迭代，通过方法论、标准及工具平台的设计，客观评估模型价值并驱动优化
结合线上AB测试与用户数据分析，输出评估报告及解决方案，确保模型效果与产品质量持续提升
最低要求
本科及以上学历，硕士学位优先
计算机科学、软件工程、人工智能等相关专业，医学专业优先
优秀的文档能力和跨团队沟通能力，能清晰表达评测结论与改进建议
有大模型评测经验，在大模型团队负责评测工作
工作职责
负责模型在应用场景下的评测体系构建，能客观、准确、全面的评估模型的真实价值并驱动模型/产品优化，产出评估报告
持续迭代/完善评估体系，包括但不限于评估方法论、标准、Benchmark、工具平台的设计和迭代等，对产出质量和模型效果负责
主动进行线上AB/用户数据/评估报告分析探查，发现潜在的问题与机会，给出数据支持、分析报告、问题解决方案建议
AI 洞察
优缺点分析
优点
- 处于AI与大模型前沿领域，技术含量高
- 背靠阿里健康，拥有真实的医疗垂直场景和数据优势
- 适合有AI背景、对医疗行业感兴趣、具备较强逻辑思维和数据分析能力的产品经理
缺点 / 挑战
- 大模型评测标准尚在探索中，需从0到1构建体系，挑战较大
- 需深入理解医疗专业知识，门槛较高
角色解读
- 可向AI产品专家、大模型应用负责人或医疗科技领域的高级产品管理方向发展
- 构建和维护大模型在医疗健康场景下的评测体系，制定评估标准和Benchmark
- 具备大模型技术理解力，掌握数据分析和AB测试方法，拥有优秀的文档撰写和跨团队沟通能力
申请策略
- 强调跨部门协作经验，因为评测工作需要与算法、工程、业务多方紧密配合
- 突出大模型评测项目经验，展示如何设计评估指标、使用Benchmark以及通过数据驱动模型优化的案例
- 补充医疗行业基础知识，熟悉主流LLM评测框架（如HELM、Big-Bench等），提升SQL和数据分析能力
面试指南
- 采用STAR法则（情境、任务、行动、结果）描述项目经历
- 重点阐述评测维度的科学性、数据的真实性以及闭环优化的过程
- 你如何设计一个大模型的评测体系？
- 在医疗场景下，大模型评测的特殊性在哪里？
- 如何通过数据分析发现模型缺陷并提出改进建议？
- 请分享一个你主导的模型优化案例
- 深入研究阿里健康的产品线，了解当前大模型在医疗咨询、辅助诊断等场景的应用痛点，准备相关的行业见解
职位点评
薪资福利85
成长发展90
工作生活60
使命价值75
薪资福利
85较高
作为已上市巨头企业的核心岗位，提供具有竞争力的薪酬包和完善的福利体系，符合市场对高级产品经理的期望。
薪资信号未披露（AI估算：2.5千–4.5万/月）
成长发展
90较高
岗位涉及前沿的大模型技术与医疗垂直领域的结合，需要构建从0到1的评测体系，极具成长性和技术挑战性。
技术前沿前沿/新兴技术
技术栈大模型、评测体系、Benchmark、AB测试
业务类型profit_center
工作生活
60中等
互联网大厂通常工作节奏较快，虽未明确提及加班情况，但核心研发和产品岗位往往面临较高的工作压力。
工作模式未明确
办公地点市区核心地段
加班情况未提及（无法判断）
使命价值
75中等
致力于通过AI技术改善医疗服务质量和效率，具有明确的社会价值和行业前景，能带来较强的职业使命感。
行业发展高速增长赛道
社会影响正向社会影响力较高
创新程度积极采用新技术
Watch Jobs