智元机器人
大模型算法工程师（VLM方向）
大模型算法工程师（VLM方向）
发布于 2 小时前普通员工/个人贡献者
全职员工仅现场办公AI算法
AI算法
Isaac-Sim
Pytorch
Slam
Vlm
Vln
多模态大模型
强化学习
机器人导航
值不值得投
77综合评分
综合评分 77
前沿技术驱动、高成长潜力、高强度研发的具身智能算法核心岗位
从薪资福利、成长发展、工作生活和使命价值四个维度综合评估，方便横向比较。
薪资怎么样
4.8万
比AI算法中位数高
发布情况
新岗位 · 今天发布
公司情况
这家公司招聘很活跃
约 1600 个在招
市场机会
选择不多
深圳 · AI算法 · 2 个在招
职位详情
关于这个职位
负责基于VLM/VLN多模态大模型与多模态感知技术，进行场景理解、指令分解及空间推理，实现语义级导航决策
构建真实场景数据集并优化模型鲁棒性，负责VLN系统端到端闭环及关键指标优化，与SLAM、感知等团队协作形成可部署的VLN能力栈
最低要求
硕士及以上学历，计算机、机器人、AI等相关专业
熟悉 VLM / 多模态大模型（如GPT-4V、LLaVA、QWen3-VL等），并有实际后训练/微调或推理部署经验
熟悉世界模型相关技术，包括环境动态建模、状态预测、行为仿真、基于模型的强化学习与规划优化
扎实的 C++/Python 编程能力，熟练使用 PyTorch，有仿真环境（Isaac-sim, Habitat-sim等）二次开发经验
工作职责
负责基于VLM/VLN多模态大模型与多模态感知（RGB-D、点云、自然语言指令等），进行场景理解、指令分解、目标定位与空间推理
结合多模态指令，实时基于视觉与点云等信息生成语义级导航决策
以量产落地为导向，设计多模态语义记忆模块，支持长时序导航、视野受限下的回溯及动态环境中的指令重规划
构建真实场景多模态数据集（含语言指令、视觉序列、运动轨迹），优化模型在开放词汇世界与复杂指令下的鲁棒性
负责VLN系统的端到端闭环，并对关键指标进行优化：导航成功率、平均耗时、卡死率、误入禁区率、舒适度（停走抖动/路径自然性等）
与SLAM、感知、路径规划、运动控制团队协作联调，形成可部署可迭代的VLN能力栈
优先资格
加分项：四足机器人实际导航/交互经验、或VLN方向的顶会论文
AI 洞察
优缺点分析
优点
- 处于具身智能风口，技术栈前沿（VLM+机器人），团队背景强大，有机会接触顶尖硬件平台
- 技术难度大，需跨学科知识融合
- 对具身智能有浓厚兴趣，具备扎实算法基础和工程落地能力的资深算法工程师
缺点 / 挑战
- 量产落地压力大，需处理复杂现实场景中的长尾问题
角色解读
- 可向具身智能算法专家、AI架构师方向发展，或在机器人感知与决策领域成为行业领军人才
- 负责将多模态大模型（VLM）应用于机器人导航（VLN），解决复杂环境下的场景理解和指令执行问题
- 精通多模态大模型微调与部署，掌握世界模型、强化学习及规划算法，具备扎实的C++/Python工程能力
申请策略
- 关注公司在具身智能领域的最新进展，准备展示如何将前沿AI技术与机器人硬件结合的实际案例
- 突出多模态大模型项目经验，强调在复杂场景下的导航成功率提升及系统优化成果
- 加强仿真环境（Isaac-sim/Habitat）二次开发能力，深入理解世界模型与强化学习的结合应用
面试指南
- 使用STAR法则（情境、任务、行动、结果）详细描述项目背景、个人贡献、技术选型依据及最终量化成果
- 请介绍你在大模型微调或推理部署方面的具体经验和挑战
- 如何设计多模态语义记忆模块以支持长时序导航？
- 在开放词汇世界中，如何提升模型对复杂指令的鲁棒性？
- 请描述一次你通过优化关键指标（如导航成功率）解决实际问题的经历
- 复习多模态大模型最新进展（如LLaVA、QWen-VL等），准备关于世界模型和强化学习在机器人导航中应用的深度思考
职位点评
薪资福利85
成长发展95
工作生活40
使命价值80
薪资福利
85较高
作为B轮独角兽企业，提供具有市场竞争力的薪资和股权期权，满足高收入预期。
薪资信号未披露（AI估算：3.5千–6.0万/月）
成长发展
95较高
职位涉及最前沿的多模态大模型与具身智能技术，技术成长空间巨大，适合追求技术突破的人才。
技术前沿前沿/新兴技术
技术栈VLM、VLN、多模态大模型、PyTorch、C++、Python、Isaac-sim、Habitat-sim、强化学习、SLAM
业务类型profit_center
工作生活
40较低
初创型高科技公司通常工作节奏较快，虽未明确提及加班，但高强度的研发任务可能影响工作生活平衡。
工作模式未明确
办公地点未明确
加班情况未提及（无法判断）
使命价值
80较高
致力于推动具身智能发展，让机器人更自然地融入人类生活，具有显著的社会价值和行业影响力。
行业发展高速增长赛道
社会影响正向社会影响力较高
创新程度开拓性创新（行业首创）
Watch Jobs