多模态算法工程师(模型优化方向)/ Multimodal Algorithm Engineer (Model Optimization)

🤖 AI 估测:¥35K-60K

发布时间:19 天前

立即应聘

ℹ️关于这个职位

这是一个专注于多模态大模型(特别是视觉语言模型VLM、视觉语言动作模型VLA和世界动作模型WAM)优化与部署的算法工程师岗位
你将负责在AMD硬件平台上,通过模型训练、压缩、量化、推理优化等技术,提升AI模型的性能和能效,以支持下一代具身智能和多模态智能体的发展

工作职责

在AMD平台上优化多模态模型(VLM / VLA / WAM)的训练策略、微调和对齐
针对具身智能场景(如机器人、基于模拟的交互),增强WAM/VLA模型的动作预测、世界状态建模和长时程规划能力
设计和实施模型优化技术,包括量化(PTQ/QAT)、剪枝、知识蒸馏、算子融合和KV缓存优化,以提高推理延迟、吞吐量和能效
与编译器、驱动程序和系统软件团队紧密合作,将模型深度集成到AMD的软件栈中
紧跟世界模型、动作生成和多模态智能体的前沿研究,并为AMD的异构计算平台探索新颖的架构

最低要求

计算机科学、人工智能、机器人学、电气工程或相关领域的硕士或博士学位
具备VLM、VLA或WAM(世界动作模型)的实践经验,尤其是在机器人决策、模拟环境训练或动作序列生成方面者优先
精通PyTorch
熟悉多模态和具身AI框架
熟悉Isaac Gym、LIBERO、MuJoCo或RoboTwin等模拟平台
具备扎实的软件工程技能,能够交付从研究原型到生产部署的全周期解决方案

👍优先资格

在开源项目(如OpenVLA、DROID、ACT)中对多模态智能体、世界模型或机器人领域有贡献
在多模态学习或具身AI领域的顶级会议(如CVPR、ICRA、CoRL、NeurIPS、ICLR)有发表记录是重要优势
在模型优化方面有深厚背景:量化、稀疏化、内核融合、动态批处理等
有AMD ROCm生态系统或异构计算性能调优经验
了解GPU/加速器架构
有CUDA或HIP经验者优先