小米
多模态大模型算法工程师
多模态大模型算法工程师
发布于 大约 2 小时前普通员工/个人贡献者
北京市
高级经验
全职员工
仅现场办公
硕士
机器学习工程
Deepspeed
Huggingface
Megatron
Pytorch
多模态大模型
强化学习
计算机视觉
AI 估算 · 35k–65k
北京多模态大模型算法工程师需求高，小米平台稳定，结合市场水平，月薪3.5-6.5万，15薪。
职位详情
关于这个职位
该职位主要负责多模态大模型的训练、对齐与推理优化，参与数据飞轮和AI Agent工具建设，探索语音视觉驱动的对话系统
要求具备扎实的算法基础和工程能力，适合希望在多模态前沿领域深耕的资深算法工程师
最低要求
硕士及以上学历，计算机、电子信息、自动化、数学等相关专业，多模态大模型、计算机视觉等相关方向
具备丰富的多模态理解、计算机视觉、或强化学习算法经验，对多模态大模型、计算机视觉、或强化学习算法有深入理解
扎实的编程基础，对数据结构、算法设计基础有深度了解，熟练掌握Python/C++等主流语言一种或多种，熟练应用pytorch、megatron、deepspeed、huggingface、transformers等深度学习框架和库
具备扎实的工程/算法能力，能迅速迁移过往的工程/算法经验，深入理解系统底层原理并进行系统优化，能快速学习新知识
工作职责
负责多模态大模型训练、对齐相关工作，包括不限于数据迭代、模型训练、模型评估
结合实际场景，提供全面的技术解决方案，参与PE、推理优化、数据飞轮建设，提升多模态大模型在应用场景的效果
协助开发和优化多模态AI Agent 的数据采集、分析及数据闭环相关工具，支持标注工具、研发工具、数据分析与可视化系统的设计与实现，提升产研团队的工作效率
探索高表现力/低延迟的语音、视觉驱动的对话系统
探索相关领域前沿进展，并结合产品对算法进行优化，使相关产品效果达到业界领先水平
探索AI能力的极限，并赋能产品以创造价值
优先资格
在CVPR / ICCV / ECCV / NeurIPS / ICLR / ICML等顶会发表过多模态大模型或计算机视觉方向高水平论文，或以主力身份参加相关领域主流算法竞赛且取得优秀成绩者优先
在ACM/ICPC、CodeForces、IOI/NOI/NOIP/CSP等编程算法竞赛中获得优秀成绩者优先
AI 洞察
优缺点分析
优点
- 小米作为大厂，平台大，业务场景丰富，算法落地机会多
- 多模态大模型是当前热门方向，技术积累和成长空间大
- 团队涉及前沿技术，能接触顶会论文和竞赛，提升技术影响力
- 需要较强的算法和工程能力，工作强度可能较大
- 竞争激烈，需要持续学习保持技术前沿
- 适合技术热情高、有扎实算法基础、渴望在大模型领域深耕的求职者
缺点 / 挑战
- 多模态大模型训练资源消耗大，需要承担高压力
角色解读
- 可从算法工程师成长为技术专家或技术负责人
- 在小米可以接触大规模真实业务场景，向AI领域顶尖专家发展
- 可转向多模态方向的产品或研究岗位，或向管理方向晋升
- 负责多模态大模型的训练与对齐，包括数据迭代、模型训练和评估
- 参与推理优化和数据飞轮建设，提升模型在实际场景中的效果
- 开发多模态AI Agent的数据采集、分析和闭环工具，支持标注和研发工具
- 探索高表现力/低延迟的语音、视觉驱动的对话系统
- 熟悉多模态大模型、计算机视觉或强化学习算法，有深入理解
- 扎实的编程基础，熟悉Python/C++，熟练应用PyTorch、Megatron、DeepSpeed等框架
- 具备良好的工程能力，能进行系统优化和迁移经验
申请策略
- 了解小米AI业务方向，准备与多模态相关的项目案例
- 在简历中突出对模型效果的量化提升，体现价值
- 突出多模态、CV或强化学习的项目经验，详细描述算法改进和效果
- 突出顶会论文或竞赛成绩，展示算法实力
- 强调工程能力，如优化推理、分布式训练等方面的实践
- 补充大模型训练框架（如Megatron、DeepSpeed）的实战经验
- 了解最新多模态大模型论文，如LLaVA、GPT-4V等
- 熟悉数据飞轮和AI Agent相关技术，提升全栈能力
面试指南
- 使用STAR法则：情境-任务-行动-结果，突出你的贡献和成果
- 从技术原理到工程实践，展示解决问题的完整思路
- 强调数据驱动和效果导向，体现业务价值
- 请介绍你参与过的多模态大模型项目，遇到的最大挑战是什么？
- 如何设计多模态数据的清洗和预处理流程？
- 解释Transformer在视觉和文本融合中的作用？
- 如何优化大模型推理速度？
- 如何进行数据飞轮的闭环迭代？
职位点评
79
综合评分
小米多模态大模型算法岗，前沿技术，成长空间大，薪资未明，现场办公。
从薪资福利、成长空间、工作节奏和岗位方向综合评估，方便横向比较。
更适合这类人
这个职位最适合注重技术成长和职业发展的求职者，能够接受一定的加班和现场办公安排。
表现最好
成长发展
相对薄弱
工作生活
薪资福利80
成长发展90
工作生活60
使命价值85
薪资福利
80较高
小米属于大厂，薪资水平较高，福利较完善，但JD未详细说明，综合看补偿性动机可得到较好满足。
薪资信号未披露（AI估算：35K-65K/月）
成长发展
90较高
多模态大模型处于前沿领域，技术迭代快，个人成长空间巨大，且培养方向明确。
技术前沿前沿/新兴技术
技术栈多模态大模型、计算机视觉、强化学习、PyTorch、Megatron、DeepSpeed、HuggingFace、Transformers
业务类型ambiguous
工作生活
60中等
工作地点北京，需现场办公，未提及弹性或加班情况，生活方式较为常规。
工作模式未明确
办公地点未明确
加班情况未提及（无法判断）
使命价值
85较高
AI大模型具有广泛的应用前景，小米生态可落地赋能产品，工作意义感强。
行业发展高速增长赛道
社会影响正向社会影响力较高
创新程度积极采用新技术
小米 的其他在招职位
相似职位推荐
Watch Jobs