
蚂蚁集团
蚂蚁集团-具身智能算法工程师-自主导航方向
蚂蚁集团-具身智能算法工程师-自主导航方向
发布于 大约 3 小时前普通员工/个人贡献者
上海市
高级经验
全职员工
仅现场办公
硕士
机器学习工程
3D重建
Habitat
Pytorch
Vln
强化学习
机器人
计算机视觉
边缘部署
AI 估算 · 30k–50k
前沿AI算法岗,蚂蚁集团上海,高学历要求,薪资竞争力强,月薪3-5万合理。
职位详情
关于这个职位
该职位专注于具身智能机器人的自主导航算法研发,涉及多模态模型(视觉-语言)开发、导航策略优化(强化学习/模仿学习)以及大规模数据工程
你将跟踪前沿技术(VLN、NWM),并将算法部署到边缘硬件,解决Sim-to-Real迁移挑战
适合对机器人、深度学习有扎实背景,并希望将算法落地到真实产品的工程师
最低要求
计算机、机器人、人工智能相关专业硕士以上学位
较强的数学建模能力,深厚的深度学习功底,熟悉具身智能主流架构
熟悉常用机器人传感器:单/双目相机、RGB-D、LiDAR、IMU,了解其物理特性、误差模型及同步机制
精通 Python,熟练使用 PyTorch,有良好的 C++ 基础
工作职责
多模态模型开发:设计并优化视觉-语言等多模态输入的导航模型,使智能体能准确解析自然语言指令及其对应的环境多传感器输入特征,构建智能体对物理空间的感知与记忆能力,解决跨场景泛化与长程规划难题
导航策略优化:研发基于强化学习(RL)或模仿学习(IL)的导航决策算法,解决寻物/指令跟随等导航及动态避障等问题,利用相关仿真环境(如 Habitat, Isaac Sim)进行模型训练与性能评测
数据工程:构建和维护大规模 VLN 数据集,3D几何重建/生成式重建等方法构造具身导航数据,或从非结构化数据(如 YouTube 视频、人类演示数据)中提取导航数据,设计高效自动标注系统
前沿技术转化:跟踪 VLN,NWM等学术界最新进展,并将其应用于实际的具身智能产品中
算法部署与优化:将复杂的导航算法在边缘侧硬件上实现低延迟推理,处理 Sim-to-Real 的迁移挑战
优先资格
在机器人或视觉顶会有高质量论文发表
有实际机器人平台(轮式、足式)的导航算法落地经验
有集群模型训练加速经验,端侧部署优化经验
AI 洞察
优缺点分析
优点
- 蚂蚁集团平台资源丰富,落地场景多,算法可快速产品化
- 聚焦具身智能前沿技术(VLN、NWM),有发表顶会论文的机会
- 团队技术氛围浓厚,与学术界连接紧密,能持续学习最新进展
- Sim-to-Real迁移难度大,算法在真实环境中可能面临诸多不可控因素
- 多模态模型训练和部署对计算资源要求高,需要处理大量数据和硬件优化
- 领域竞争激烈,需要快速跟进学术前沿并转化为实际能力
缺点 / 挑战
- 适合对机器人、深度学习有强烈兴趣,具备扎实工程能力,喜欢挑战真实世界问题,并希望在具身智能领域长期发展的工程师
角色解读
- 纵向深耕:从算法工程师成长为具身智能领域专家,主导核心导航技术方向
- 横向拓展:向机器人系统集成、端侧优化或产品落地方向发展,成为全栈机器人工程师
- 管理路径:在技术积累后转向技术管理,带领团队攻克具身智能落地难题
- 设计并优化多模态导航模型,结合视觉-语言输入,让机器人理解环境并执行长程任务
- 研发基于强化学习或模仿学习的导航决策算法,在Habitat、Isaac Sim等仿真环境中训练并评测
- 构建大规模VLN数据集,利用3D重建或非结构化数据(如YouTube视频)自动标注,支撑模型训练
- 将算法部署到边缘硬件,优化推理延迟,解决从仿真到真实环境的迁移问题
- 扎实的数学和深度学习基础,熟悉具身智能主流架构(如VLM、RL、IL)
- 精通Python和PyTorch,具备良好的C++编程能力,能实现高效算法
- 熟悉机器人传感器(相机、LiDAR、IMU)及其物理特性,了解同步与标定
- 有强化学习或模仿学习项目经验,了解Habitat、Isaac Sim等仿真环境
申请策略
- 关注蚂蚁集团在机器人领域的业务布局,面试中主动了解团队当前具体项目方向
- 准备一个端到端的导航算法项目展示,从数据到训练再到部署,体现完整工程思维
- 突出强化学习/模仿学习项目经历,最好有仿真环境或真实机器人验证结果
- 强调多模态模型训练经验,如视觉-语言导航、目标导航等,并附上论文或GitHub链接
- 展示传感器处理(相机、LiDAR、IMU)和SLAM等相关经验
- 如果有边缘部署或端侧优化经验(如TensorRT、ONNX),务必提及
- 补充Habitat、Isaac Sim等仿真环境的使用经验,可自学官方教程
- 复习强化学习经典算法(PPO、SAC等)和模仿学习(DAgger、GAIL等),并实现简单demo
面试指南
- 项目描述使用STAR法则(情境、任务、行动、结果),突出技术难点和你的贡献
- 对于开放性问题,先给出总体思路,再分步骤具体解释,如域迁移可采用域随机化、领域适应、渐进式微调等方法
- 请描述一个你曾参与过的导航或机器人项目,包括遇到的问题和解决方案
- 如何解决Sim-to-Real中的域迁移问题?请举例说明
- 在多模态导航中,如何处理视觉和语言特征的融合?能否设计一个简单模型?
- 请解释强化学习中探索与利用的平衡,并说明在导航任务中如何实施
- 你如何对导航算法进行端侧部署优化?考虑哪些因素?
- 复习机器人导航经典算法(A*、DWA、TEB等)和深度学习导航(RL、IL)的对比
职位点评
73
综合评分
顶尖平台、前沿具身智能方向、成长空间极大,但工作生活平衡较模糊。
从薪资福利、成长空间、工作节奏和岗位方向综合评估,方便横向比较。
更适合这类人
最适重视技术成长、追求前沿创新的求职者,能接受现场办公和工作强度的不确定性。
表现最好
成长发展
相对薄弱
工作生活
薪资福利75
成长发展90
工作生活50
使命价值70
薪资福利
75中等
薪资竞争力强,互联网大厂福利完善,但未明确披露薪资范围。
薪资信号未披露(AI估算:30K-50K/月)
成长发展
90较高
技术前沿(具身智能、VLN),成长空间大,有顶会发论文机会,但JD未明确提及晋升通道。
技术前沿前沿/新兴技术
技术栈多模态模型、强化学习、模仿学习、VLN、3D重建、Habitat、Isaac Sim
成长机会前沿技术转化
业务类型profit_center
工作生活
50较低
仅现场办公,上海办公,未提及弹性或远程,可能有一定加班压力(未明确)。
工作模式仅现场办公
办公地点未明确
加班情况未提及(无法判断)
使命价值
70中等
具身智能是未来趋势,蚂蚁集团平台有助于技术落地,但社会价值中性。
行业发展高速增长赛道
社会影响中性/一般
创新程度积极采用新技术
蚂蚁集团 的其他在招职位
相似职位推荐
Watch Jobs