阿里巴巴
晓天衡宇-大模型评测工程师-AI应用
晓天衡宇-大模型评测工程师-AI应用
发布于 大约 9 小时前基层主管/组长
杭州市
中级经验
全职员工
仅现场办公
硕士
数据运营
Ai应用
团队管理
大模型
数据标注
流程优化
评测
质量管理
AI 估算 · 25k–40k
职位详情
关于这个职位
作为大模型评测工程师，你将负责AI原生应用的数据构造与评测，聚焦用户体验和端到端效果提升
与产品和算法团队紧密合作，设计标注流程，制定评测标准，并管理数据质量体系
该岗位需要硕士学历，有数据标注或评测经验者优先，适合对AI有热情、具备团队管理能力的人才
最低要求
硕士及以上学历，参与过竞品AI应用、垂类大模型数据及评测工作优先、领域数据标注管理、标注管理等工作经验者优先
能准确理解业务诉求，对质量/数据变化敏锐，能通过独到的视角或科学的方法发现问题，推动业务指标达成和策略落地
制定业务规划、目标管理以及团队人员管理工作，与上下游团队充分沟通协作，关注团队效果数据和目标达成
积极主动，对AI有激情，具备较强的团队协作能力、组织协调能力、复杂问题解决能力
工作职责
负责AI原生应用的数据构造及应用评测工作，主要聚焦在用户体验，端到端效果评测提升，与产品及算法团队密切合作，理解算法需求，提供满足算法研发需求的数据
设计和实现各领域标注方向AI训练流程，并不断优化迭代，高效完成标注和内容生产项目
统筹ai应用各领域评测方案及数据生产方案
依据多元数据集设计需求与应用场景，为数据集标准环节制定详实、完备且极具可操作性的标准
定期对数据集开展阶段性质量检测，持续迭代体系化标注标准，助力打造行业标杆级数据集
构建并维护一套完善的各领域AI数据内容质量管理体系，积极推动组织流程及交付流程优化，全面把控内容质量并对结果负责，并不断进行优化迭代
AI 洞察
优缺点分析
优点
- 阿里巴巴平台大，资源丰富
- AI领域前沿，技术积累快
- 涉及团队管理，提升领导力
- 薪资福利优厚
- 工作强度大，可能加班
- 需要处理复杂的数据问题
- 跨部门协作要求高
- 适合有数据标注或评测经验，对AI有热情，并希望承担管理职责的求职者
缺点 / 挑战
暂无明显挑战项
角色解读
- 可向AI产品经理或算法工程师方向发展
- 晋升为数据团队负责人
- 成为AI评测领域专家
- 负责AI应用的数据构造和评测，确保用户体验和效果
- 设计标注流程，管理数据生产项目
- 制定评测标准，进行质量检测和迭代
- 管理数据质量体系，优化流程
- 熟悉数据标注和评测流程
- 具备项目管理能力
- 对AI应用有深入理解
- 良好的沟通和团队协作能力
申请策略
- 了解阿里巴巴AI业务方向
- 准备相关案例，展示问题解决能力
- 突出数据标注或评测项目经验
- 强调团队管理或项目管理经历
- 展示对AI应用的理解和热情
- 量化成果，如效率提升、质量改进
- 学习大模型基础知识
- 熟悉数据标注工具和平台
面试指南
- 使用STAR法则，结合具体项目经验，突出方法和成果
- 如何设计一个数据标注流程？
- 如何评估AI应用的用户体验？
- 描述一次你管理数据项目的经历
- 如何保证数据质量？
- 对AI大模型的了解？
- 复习数据标注和评测方法论
- 准备项目案例，量化成果
职位点评
74
综合评分
大厂AI前沿岗位，技术成长快，薪资优厚，但工作强度大。
从薪资福利、成长空间、工作节奏和岗位方向综合评估，方便横向比较。
更适合这类人
适合追求技术成长和职业发展，能接受高强度工作的求职者。
表现最好
成长发展
相对薄弱
工作生活
薪资福利80
成长发展85
工作生活50
使命价值70
薪资福利
80较高
阿里巴巴薪资福利优厚，但JD未明确具体薪资，属于市场水准。
薪资信号未披露（AI估算：25K-40K/月）
成长发展
85较高
AI领域前沿，技术成长快，有团队管理职责，发展空间大。
技术前沿前沿/新兴技术
技术栈大模型、AI应用、数据标注、评测
业务类型ambiguous
工作生活
50较低
仅现场办公，未提及弹性工作，阿里巴巴工作强度可能较大。
工作模式仅现场办公
办公地点科技园/产业园
加班情况未提及（无法判断）
使命价值
70中等
AI应用推动行业创新，但JD未强调社会价值。
行业发展高速增长赛道
社会影响中性/一般
创新程度积极采用新技术
Watch Jobs