Alibaba logo
阿里巴巴
算法技术-搜索多模态大模型应用-算法工程师实习生

算法技术-搜索多模态大模型应用-算法工程师实习生

发布于 大约 2 小时前

实习/见习

北京市 / 杭州市
无经验要求
实习生
仅现场办公
硕士
机器学习工程
Llm
Pytorch
Rlhf
Sft
Tensorflow
Vllm
多模态大模型
模型加速
电商搜索

AI 估算 · 0k–1k

实习生薪资通常按日或月计算,大厂算法实习生日薪约300-500元,考虑到岗位技术含量高,取中值。

职位详情

关于这个职位

这是阿里巴巴搜索团队的多模态大模型算法实习生岗位,你将参与多模态大模型的预训练、SFT、RLHF等前沿技术研究,并应用于电商搜索场景,包括个性化预训练、相关性模型、稀疏检索和推理加速等方向

适合对多模态大模型有浓厚兴趣、具备扎实深度学习基础的硕士或博士生,能接触到工业级大规模数据和真实业务场景

最低要求

自然语言处理、机器学习、数据挖掘、人工智能等相关专业的硕士生/博士生

熟悉多模态/大语言模型的基本原理和相关算法,如BLIP2、CLIP、GPT、GPT-4等
熟练掌握Tensorflow、Pytorch等深度学习框架,扎实的编程基础,具备独立的算法实现能力

工作职责

跟进多模态大模型(vLLM)预训练、SFT、RLHF等技术,调研与跟进最新进展

负责多模态相关性大模型、多模态大模型稀疏检索和稠密模型,多模态大模型个性化预训练方向,以及多模态大语言模型的训练和推理加速
多模态大模型个性化预训练:研发个性化预训练模型,探索在训练样本、模型参数量等维度上scale-up能带来的收益,研究在电商搜索场景下, CTR和CVR 模型中用户动线特征的挖掘和应用,包括用户行为模型的获取、特征设计、结构优化等个性化建模
多模态大模型的训练和推理加速:协助研究和开发多模态大语言模型的加速技术,包括但不限于量化、剪枝和蒸馏,以及数据特征和调度优化
实现和优化多模态大模型推理框架,以提高推理速度和效率
与工程团队合作,解决机器学习模型在部署过程中的性能问题
多模态大模型相关性模型:研发基于多模态大模型的相关性标注和评测大模型,应用到体验实验评测、体验监控、离线数据标注、线上相关性判断等方向
多模态大模型稀疏检索和稠密模型:研究方向包括不限于:电商词表生成、多模态稀疏词表和稠密表征技术、LLMs幻觉缓解等问题

优先资格

有LLM实操经验,参与过大模型预训练,SFT,RLHF等项目者优先

良好的逻辑分析能力和数理基础,对算法原理及应用有较深入的理解,在人工智能相关的各类国际顶级会议/期刊中发表过论文者优先

AI 洞察

优缺点分析

优点

  • 平台优势:阿里巴巴是行业巨头,拥有海量电商数据和丰富的业务场景,能接触真实工业级大模型应用
  • 技术前沿:岗位涉及多模态大模型、个性化预训练、推理加速等热门方向,技术含金量高
  • 成长快速:与顶尖团队合作,有机会参与国际会议论文发表,提升学术和工程能力
  • 转正机会:实习表现优秀者可能获得转正offer,职业起点高
  • 技术难度大:多模态大模型训练和推理加速需要深厚的理论基础和工程能力,学习曲线陡峭
  • 竞争激烈:岗位要求高,候选人多为名校硕博,竞争激烈
  • 适合对多模态大模型和搜索技术有浓厚兴趣,具备扎实深度学习基础,抗压能力强,希望在工业界积累实战经验的硕士或博士生

缺点 / 挑战

  • 工作强度高:互联网大厂节奏快,可能面临较大工作压力和加班

角色解读

  • 实习期间可深入工业级大模型应用场景,积累多模态大模型训练和部署的实战经验
  • 表现优秀者有机会转正,成为阿里巴巴算法工程师,参与核心搜索业务
  • 未来可向多模态大模型专家或技术管理方向发展,在AI领域持续深耕
  • 参与多模态大模型的预训练、SFT、RLHF等核心环节,跟进最新技术进展并落地到电商搜索场景
  • 研发个性化预训练模型,挖掘用户行为特征,优化CTR和CVR模型,提升搜索效果
  • 研究和实现模型加速技术,如量化、剪枝、蒸馏,优化推理框架,提高部署效率
  • 开发多模态相关性模型和稀疏检索技术,解决电商搜索中的相关性判断和检索问题
  • 扎实的深度学习基础,熟悉Transformer架构、多模态模型(如CLIP、BLIP2)和大语言模型(GPT系列)
  • 熟练掌握PyTorch或TensorFlow,具备独立实现算法的编程能力
  • 了解大模型训练和推理加速技术,如分布式训练、量化、蒸馏等
  • 良好的数学和逻辑分析能力,能够理解和优化算法原理

申请策略

  • 关注阿里巴巴招聘官网和校园招聘渠道,及时投递
  • 在简历中突出与岗位匹配的技能,并准备展示项目成果的代码或文档
  • 突出多模态或大模型相关项目经验,如预训练、SFT、RLHF等,并说明具体贡献和成果
  • 强调深度学习框架(PyTorch/TensorFlow)的熟练度,以及独立实现算法的能力
  • 如有论文发表,重点展示在AI顶会或期刊上的成果,体现研究能力
  • 展示对电商搜索或推荐系统的理解,如相关项目或课程设计
  • 提前学习多模态模型(如CLIP、BLIP2)和大语言模型(如GPT)的原理,并动手实践
  • 熟悉vLLM等推理框架,了解模型量化、剪枝、蒸馏等加速技术

面试指南

  • STAR法则:描述项目背景、任务、行动和结果,突出个人贡献和量化成果
  • 技术原理+实践结合:先解释基本原理,再结合项目经验说明应用和效果
  • 问题解决思路:遇到技术难点时,如何分析、尝试解决方案并最终解决
  • 请介绍你参与过的多模态或大模型项目,具体负责哪些部分?
  • 如何理解多模态大模型的预训练和SFT?请谈谈你的经验
  • 在模型推理加速方面,你了解哪些技术?如何选择量化、剪枝或蒸馏?
  • 如何设计一个多模态相关性模型用于电商搜索?
  • 你对RLHF有什么理解?如何应用到实际场景?

职位点评

67
综合评分

顶级互联网大厂,前沿多模态大模型技术,发展空间大,但工作强度高,WLB一般。

从学习成长、工作节奏、岗位方向和实习待遇综合评估,方便比较实习机会。

更适合这类人
适合追求技术成长、希望接触前沿AI领域、能接受高强度工作的求职者。
表现最好
成长发展
相对薄弱
工作生活
薪资福利60
成长发展95
工作生活40
使命价值80

薪资福利

60中等

实习薪资在行业中属于中上水平,但作为实习岗位,整体薪酬福利有限,且未明确提及转正后待遇。

薪资信号未披露(AI估算:0K-0K/月)

成长发展

95较高

岗位处于AI前沿领域,涉及多模态大模型、个性化预训练、推理加速等核心技术,能极大提升技能和职业竞争力。

技术前沿前沿/新兴技术
技术栈多模态大模型、vLLM、预训练、SFT、RLHF、量化、剪枝、蒸馏、PyTorch、TensorFlow
业务类型profit_center

工作生活

40较低

工作地点在北京或杭州,需现场办公,未提及弹性工作安排,互联网大厂实习强度可能较大。

工作模式仅现场办公
办公地点未明确
加班情况未提及(无法判断)

使命价值

80较高

电商搜索场景直接影响用户体验和商业效率,具有较高的行业价值,但社会影响力相对中性。

行业发展高速增长赛道
社会影响中性/一般
创新程度积极采用新技术
Watch Jobs