
字节跳动
AI多模态算法专家-剪映(北京/上海/广州/深圳/杭州)
AI多模态算法专家-剪映(北京/上海/广州/深圳/杭州)
发布于 大约 8 小时前普通员工/个人贡献者
北京市 / 上海市
专家级经验
全职员工
仅现场办公
学历未注明
机器学习工程
Llm
Nlp
Rag
向量数据库
多模态
推荐系统
计算机视觉
AI 估算 · 45k–80k
多模态与推荐算法门槛高,资深专家稀缺,一线城市薪资有竞争力。
职位详情
关于这个职位
这是一个在字节跳动剪映团队的多模态算法专家岗位,负责设计和构建多模态大模型与推荐系统,涉及LLM、多模态预训练、搜索推荐等方向
你将主导前沿技术在视频创作场景中的落地,与一流团队合作,推动产品智能化升级,获得极具竞争力的薪酬和成长空间
最低要求
计算机、软件工程相关专业
熟悉大语言模型和多模态常用算法,RAG/SFT/RLHF/Prompt
熟悉CF、MF、FM、GBDT、DNN、Wide&Deep等推荐算法
对ElasticSearch、向量化数据库,搜索召回、排序和相关性等技术有应用经验
具备出色的编程能力,熟悉Python/C++编程,熟悉基础数据结构和算法
拥有快速学习新技术的能力,能够在较短时间内理解前沿论文,有独立思考、问题分析和解决能力
责任心强,积极主动,热爱技术,有良好的沟通能力和团队合作能力
工作职责
主导设计和构建多模态模型和LLM,包括多模态预训练、指令微调,模型加速和Prompt工程等
主导改进推荐系统,覆盖表征学习,候选挖掘,召回,粗排,精排,多目标融合等环节,提升信息匹配的效率
主导应用NLP及多模态的内容表示算法,理解用户剪辑意图,优化综搜及垂搜的搜索、搜索推荐词效果
根据剪映业务需求,结合计算机视觉和深度学习等技术,产出、优化和落地智能化技术方案
参与剪映业务需求研发,配合其他同学,将技术方案落地业务线
优先资格
有编程/数模竞赛获奖和顶会论文者优先
有多模态大模型预训练/微调经验者优先
有推荐系统落地经验者优先
有搜索引擎落地经验者优先
AI 洞察
优缺点分析
优点
- 平台优势:字节跳动拥有海量数据和丰富场景,算法落地机会多,影响力大
- 薪酬竞争力强:资深专家岗位薪资处于行业顶尖水平,股权激励等福利优厚
- 团队实力:与顶级算法人才协作,学习氛围浓厚,可获得顶会发表机会
- 工作强度较大:互联网大厂节奏快,可能面临加班和高压
- 技术迭代迅速:需持续跟踪前沿论文,保持学习状态,否则容易被淘汰
- 跨团队协作多:需要与产品、工程、设计等多方沟通,对协调能力要求高
缺点 / 挑战
- 技术前沿:接触大规模多模态模型和推荐系统,挑战性强,技术成长快
- 适合热爱挑战、具备深厚算法功底和自驱力的技术专家,能适应快节奏并追求技术突破
角色解读
- 技术专家路线:深耕多模态和推荐方向,成为领域内权威,主导核心算法突破
- 技术管理路线:积累项目主导经验,向技术Leader或AI架构师方向发展
- 业务创新路线:结合剪映业务,探索视频创作智能化新场景,孵化创新产品
- 设计和构建多模态大模型,包括预训练、指令微调、模型加速和Prompt工程,推动模型在视频创作场景中的应用
- 改进推荐系统全链路,从表征学习到召回、排序,提升内容与用户的匹配效率
- 应用NLP和多模态内容表示算法,优化综合搜索和垂直搜索的推荐词效果,理解用户剪辑意图
- 结合计算机视觉和深度学习技术,产出并落地智能化剪辑方案,与团队协作交付业务价值
- 扎实的多模态和大语言模型知识,熟悉RAG、SFT、RLHF等常用技术
- 精通推荐算法,如CF、MF、FM、GBDT、DNN、Wide&Deep,并有落地经验
- 优秀的编程能力,熟练使用Python/C++,掌握数据结构和算法基础
- 了解搜索引擎和向量数据库,具备搜索相关技术应用能力
申请策略
- 提前了解剪映的功能和用户群,思考AI技术如何改善剪辑体验,准备相关想法
- 在面试中展示对业务的理解,不局限于算法本身,体现技术与产品结合的能力
- 突出多模态预训练或微调项目经历,详细展示你在模型设计、训练和优化中的具体贡献
- 强调推荐系统落地案例,用量化指标体现效果提升,如点击率、转化率增长
- 展示顶会论文或编程/数模竞赛获奖,体现学术能力和问题解决实力
- 写出熟悉的编程语言和工具链,特别是Python/C++、深度学习框架、向量数据库
- 补充RAG、SFT、RLHF等大模型关键技术,动手实践中小规模微调
- 熟悉ElasticSearch和向量数据库的应用,了解搜索召回和排序原理
面试指南
- 用STAR法则描述项目:情境、任务、行动、结果,突出你的个人贡献和量化成果
- 技术问题从原理讲到实践,先阐述算法思想,再结合你的落地经验说明关键点
- 开放性问题展现思考深度,将技术趋势与业务场景结合,给出有依据的预判
- 请介绍你最近负责的多模态项目,包括技术选型、训练过程和遇到的挑战
- 如何设计推荐系统的召回和排序流程?如何评估效果?
- 如何利用大语言模型提升搜索相关性?请给出具体方案
- 如何优化多模态模型的推理速度以支持线上服务?
- 你如何看待多模态技术在未来视频内容创作中的发展?
职位点评
70
综合评分
高薪前沿技术岗,发展机会巨大,但工作强度高,适合技术与事业驱动型人才。
从薪资福利、成长空间、工作节奏和岗位方向综合评估,方便横向比较。
更适合这类人
最适合追求技术精进和职业快速成长的求职者,同时需要接受高强度工作节奏。
表现最好
成长发展
相对薄弱
工作生活
薪资福利75
成长发展92
工作生活35
使命价值65
薪资福利
75中等
薪资未在JD中明示,但字节跳动对顶尖算法专家的薪酬极具竞争力,福利体系完善。
薪资信号未披露(AI估算:45K-80K/月)
成长发展
92较高
岗位处于多模态和推荐算法的技术前沿,有大量实践机会,成长空间巨大。
技术前沿前沿/新兴技术
技术栈多模态、LLM、推荐系统、RAG、SFT、RLHF、Prompt
业务类型profit_center
工作生活
35较低
JD未提及工作生活平衡,大厂算法岗位通常强度较高,工时不确定性大。
工作模式未明确
办公地点未明确
加班情况未提及(无法判断)
使命价值
65中等
行业处于高速增长期,但岗位使命偏商业落地,社会使命感有限。
行业发展高速增长赛道
社会影响中性/一般
创新程度积极采用新技术
字节跳动 的其他在招职位
相似职位推荐
Watch Jobs