
蚂蚁集团
蚂蚁集团-AI数据引擎-高级开发工程师-杭州
蚂蚁集团-AI数据引擎-高级开发工程师-杭州
发布于 2 小时前普通员工/个人贡献者
全职员工仅现场办公数据工程
数据工程
Go
Llm
Paimon
Sql
任务调度
分布式系统
多模态数据
大规模数据处理
数据湖
值不值得投
78综合评分
综合评分 78
AI数据基础设施核心研发岗,技术前沿、成长性强,办公灵活性未明确。
从薪资福利、成长发展、工作生活和使命价值四个维度综合评估,方便横向比较。
薪资怎么样
4.8万
比数据工程中位数高
发布情况
新岗位 · 今天发布
公司情况
这家公司招聘很活跃
约 740 个在招 · 其中数据工程 10 个
市场机会
选择面较广
杭州 · 数据工程 · 约 120 个在招
职位详情
关于这个职位
该职位聚焦蚂蚁集团AI数据引擎方向,负责AI数据处理平台、大规模数据加工链路、多模态数据湖与训练数据体系的研发和优化
你将参与任务编排、算子接入、稳定性建设、性能优化、数据血缘治理及Agentic数据处理等核心工作,面向AI训练数据基础设施解决复杂工程问题
最低要求
计算机、软件工程等相关专业本科及以上学历,3年以上工作经验,具备扎实的计算机基础,有后端系统、数据平台或分布式系统研发经验
熟练掌握Java、Python、C++、Go中的至少一门编程语言,具备良好的工程习惯,能够独立完成模块设计、开发、测试与问题排查
具备SQL使用与数据分析能力
理解分布式系统的基本原理,能够围绕一致性、容错、扩展性、并发与性能进行合理设计,熟悉缓存、消息队列、对象存储等常见基础组件
在以下至少一个方向具备实际项目经验,并愿意向相邻领域拓展:大规模数据处理与任务调度、流批计算、数据湖与存储、元数据与血缘治理,或AI数据工程及Agent应用研发
能基于监控、日志、链路追踪和实验分析定位复杂问题,具备性能优化或稳定性建设经验
关注方案在真实业务中的效果,能够说明技术取舍与收益
对大模型与AI数据基础设施有持续学习和实践意愿,愿意在研发工作中使用AI工具,能够审查、验证AI产出,并对最终交付质量负责
具备清晰的逻辑表达和跨团队沟通能力,有责任心、主动性与协作意识,愿意深入业务和技术细节,持续推动问题解决
工作职责
AI数据处理平台与稳定性建设: 参与Altum平台架构设计与核心模块研发,完善任务编排、算子接入与执行管理
通过样本级重试、端到端可观测、SLA保障、熔断保护和智能运维诊断,提高复杂数据加工链路的可靠性与故障恢复能力
大规模数据加工性能优化: 面向AI数据处理中的计算、存储与调度瓶颈,建设异构算力融合调度能力,优化算子执行、数据读写及资源利用率
推进全局去重、增量同步、样本重试等场景的增量计算,以性能、成本和稳定性指标验证优化效果
多模态数据湖与训练数据链路: 参与Paimon / rlake相关平台能力建设,完善多模态数据存储、湖流一体研发与运维能力,优化采集、加工、上云、训练消费的全链路体验与IO效率,推动实际业务迁移和落地
AI原生研发与Agentic数据处理: 建设端到端场景化研发能力,丰富节点与算子,探索人机协同和Agent驱动的数据处理方式
将AI能力用于研发、诊断与交付过程,通过可验证的质量和效率指标持续迭代
AI数据血缘与资产管治: 参与Holo元数据、数据资产标识和样本集血缘体系建设,提升关键链路的血缘覆盖率与准确率
建设资产发现、数据消费和分析洞察能力,帮助业务看清模型版本、专项维度的资源投入与效果产出,提升跨业务复用效率
优先资格
加分项:
● 有Ray、Spark等计算框架,或Paimon等数据湖技术的大规模实践、性能优化或源码研发经验
● 有CPU / GPU异构资源调度、分布式任务编排、增量计算、全局去重或样本级容错等相关经验
● 有文本、图像、音频、视频等多模态训练数据的采集、清洗、加工、存储或消费链路建设经验
● 有元数据管理、数据血缘、资产标识、数据发现、成本分析或跨团队数据复用平台建设经验
● 有Agent、LLM应用、AI Coding或智能运维的落地实践,能展示实际效果及质量评估方法
● 有开源贡献、技术文章、论文、专利或高质量技术分享,能够体现持续钻研和解决复杂问题的能力
AI 洞察
优缺点分析
优点
- 岗位处在AI数据基础设施与大模型训练数据链路的交叉方向,技术议题复杂且成长空间较大
- 工作内容覆盖平台架构、分布式系统、数据湖、多模态数据和Agent应用,技术栈丰富,有利于形成复合能力
- 明确强调性能、成本、稳定性、血缘覆盖率和业务落地效果,适合用量化结果体现技术价值
- 加分项与开源贡献、源码研发、技术分享等相关,对有技术沉淀的候选人较友好
- 需要跨团队推动业务迁移、资产复用和治理体系建设,沟通协调成本不低
- AI原生研发和Agentic数据处理属于快速演进方向,需要持续学习并验证AI产出的质量
- 适合有后端、数据平台或分布式系统经验,希望深入AI数据基础设施、训练数据链路和大规模平台工程的研发工程师
缺点 / 挑战
- 涉及大规模数据加工、异构算力和复杂链路稳定性,技术深度和系统设计要求较高
角色解读
- 可向AI数据基础设施专家方向发展,深耕数据湖、分布式调度、异构算力、训练数据链路和稳定性体系
- 可逐步承担平台架构设计、跨团队技术方案推动和核心模块Owner职责,向高级技术专家或架构师成长
- 未来也可转向AI工程化、Agent应用研发、智能运维或数据资产治理等更复合型技术方向
- 参与AI数据处理平台Altum的架构设计和核心模块研发,围绕任务编排、算子接入、执行管理和稳定性能力建设解决复杂链路问题
- 面向大规模数据加工场景,优化计算、存储、调度和资源利用率,推进增量计算、全局去重、样本级重试等能力落地
- 建设多模态数据湖和训练数据链路,覆盖文本、图像、音频、视频等数据的采集、加工、上云和训练消费
- 探索Agentic数据处理和AI原生研发方式,将LLM、AI Coding、智能诊断等能力用于研发、运维和交付流程
- 需要扎实的后端与分布式系统基础,熟悉一致性、容错、扩展性、并发、性能优化等设计原则
- 至少熟练掌握Java、Python、C++、Go中的一门语言,并具备SQL使用、数据分析和独立排查问题的能力
- 需要理解缓存、消息队列、对象存储等基础组件,并能结合监控、日志、链路追踪定位复杂故障
- 具备大规模数据处理、任务调度、流批计算、数据湖、元数据血缘或AI数据工程经验会显著匹配
申请策略
- 面试前建议了解蚂蚁集团AI数据引擎、Altum、Paimon、rlake、Holo等相关公开技术信息,形成对业务场景的基本判断
- 申请时尽量用量化指标表达项目价值,例如性能提升、成本下降、稳定性改善、血缘覆盖率提升或迁移效率提升
- 重点突出你参与过的大规模数据处理、任务调度、流批计算或数据平台项目,说明数据规模、QPS、时延、成本或稳定性收益
- 强化分布式系统能力,包括一致性、容错、扩展性、并发控制、缓存、消息队列、对象存储等实际设计经验
- 展示性能优化和稳定性建设案例,如故障定位、SLA保障、熔断保护、可观测性、样本级重试或智能运维诊断
- 如果有Ray、Spark、Paimon、CPU/GPU调度、多模态数据、数据血缘、Agent或LLM应用经验,应单独列出并说明落地效果
- 可补强数据湖与湖流一体技术,重点理解Paimon、Iceberg、Hudi等存储格式或引擎的适用边界与性能优化思路
- 可学习分布式任务编排、增量计算、全局去重、样本级容错和异构资源调度,形成可讲述的方案设计案例
面试指南
- 项目类问题采用“背景规模—核心难点—方案设计—个人贡献—量化结果—复盘取舍”的结构回答
- 系统设计类问题先明确约束和目标,再分层拆解任务编排、执行引擎、存储、监控、容错和成本治理
- 性能优化类问题按照指标定义、瓶颈定位、方案对比、实验验证、线上收益和后续迭代来展开
- 请介绍一个你主导或深度参与的大规模数据处理平台项目,你在其中负责哪些核心模块?
- 如何设计一个支持样本级重试、端到端可观测和SLA保障的数据加工链路?
- 面对计算、存储或调度瓶颈时,你如何定位问题并验证优化收益?
- 你如何理解数据湖、湖流一体和元数据血缘在AI训练数据链路中的价值?
- 在研发流程中使用AI工具或Agent时,如何审查产出质量并对最终交付负责?
职位点评
薪资福利82
成长发展90
工作生活55
使命价值78
薪资福利
82较高
职位为高级开发工程师,技术要求覆盖分布式系统、数据平台和AI数据基础设施,薪酬估算处于较高水平。JD未披露具体薪资和福利项,因此补偿性判断主要基于岗位技术门槛与城市市场水平。
薪资信号未披露(AI估算:3.5千–6.0万/月)
成长发展
90较高
岗位涉及AI数据处理平台、多模态数据湖、Agentic数据处理、数据血缘和智能运维等方向,技术成长空间明显。JD还提到源码研发、开源贡献、技术文章和高质量技术分享等加分项,适合持续钻研型工程师。
技术前沿前沿/新兴技术
技术栈AI数据处理、Altum、任务编排、算子接入、端到端可观测、SLA、熔断保护、智能运维诊断、异构算力融合调度、增量计算、Paimon、rlake、湖流一体、多模态数据、Agent、LLM、AI Coding、Holo、元数据、数据血缘、数据资产标识
成长机会开源贡献、技术文章、论文、专利、高质量技术分享、持续钻研、解决复杂问题
业务类型ambiguous
工作生活
55较低
JD仅给出杭州地点,未明确远程、混合办公、弹性工时或加班安排,生活化动机相关信息不足。岗位涉及复杂平台建设和稳定性保障,但JD未直接描述工作强度,因此只能给出中等偏保守判断。
工作模式未明确
办公地点未明确
加班情况未提及(无法判断)
使命价值
78中等
岗位服务于AI数据基础设施和训练数据链路,对提升AI研发效率、数据复用效率和资源投入产出透明度有较明确价值。JD未直接表达社会使命或公共价值导向,意义感主要来自技术基础设施建设与业务落地效果。
行业发展高速增长赛道
社会影响中性/一般
创新程度积极采用新技术
蚂蚁集团 的其他在招职位
相似职位推荐
Software Engineer - Systematic Data Platform
Millennium · 香港特别行政区
AI 估算 · 4.5–7.5万40 分钟前发布
Senior Scientist, Data
巴斯夫 · 上海市
AI 估算 · 3.0–5.0万2 小时前发布
【2027校招】Dots-采集工程
小红书 · 上海市
AI 估算 · 2.2–3.5万6 小时前发布
阿里妈妈-AI数据研发工程师(数据湖仓 / Data Agent)-杭州/北京
天猫 · 杭州市
AI 估算 · 3.5–6.5万18 小时前发布
Lead AI Data Engineer
渣打银行 · 广州市
AI 估算 · 3.5–6.0万1 天前发布
数据开发实习生(国际化)-MJ020810
滴滴出行 · 杭州市
AI 估算 · 0.2–0.3千1 天前发布
智元科技-数据研发工程师-北京
阿里巴巴 · 北京市
AI 估算 · 2.5–4.5万1 天前发布
千问事业部-领域数据建设专家-杭州
阿里巴巴 · 杭州市
AI 估算 · 3.0–5.0万1 天前发布
Watch Jobs