ByteDance logo
字节跳动
AI多模态算法专家-剪映(北京/上海/广州/深圳/杭州)

AI多模态算法专家-剪映(北京/上海/广州/深圳/杭州)

发布于 大约 8 小时前

普通员工/个人贡献者

北京市 / 上海市
专家级经验
全职员工
仅现场办公
学历未注明
机器学习工程
Llm
Nlp
Rag
向量数据库
多模态
推荐系统
计算机视觉

AI 估算 · 45k–80k

多模态与推荐算法门槛高,资深专家稀缺,一线城市薪资有竞争力。

职位详情

关于这个职位

这是一个在字节跳动剪映团队的多模态算法专家岗位,负责设计和构建多模态大模型与推荐系统,涉及LLM、多模态预训练、搜索推荐等方向

你将主导前沿技术在视频创作场景中的落地,与一流团队合作,推动产品智能化升级,获得极具竞争力的薪酬和成长空间

最低要求

计算机、软件工程相关专业

熟悉大语言模型和多模态常用算法,RAG/SFT/RLHF/Prompt
熟悉CF、MF、FM、GBDT、DNN、Wide&Deep等推荐算法
对ElasticSearch、向量化数据库,搜索召回、排序和相关性等技术有应用经验
具备出色的编程能力,熟悉Python/C++编程,熟悉基础数据结构和算法
拥有快速学习新技术的能力,能够在较短时间内理解前沿论文,有独立思考、问题分析和解决能力
责任心强,积极主动,热爱技术,有良好的沟通能力和团队合作能力

工作职责

主导设计和构建多模态模型和LLM,包括多模态预训练、指令微调,模型加速和Prompt工程等

主导改进推荐系统,覆盖表征学习,候选挖掘,召回,粗排,精排,多目标融合等环节,提升信息匹配的效率
主导应用NLP及多模态的内容表示算法,理解用户剪辑意图,优化综搜及垂搜的搜索、搜索推荐词效果
根据剪映业务需求,结合计算机视觉和深度学习等技术,产出、优化和落地智能化技术方案
参与剪映业务需求研发,配合其他同学,将技术方案落地业务线

优先资格

有编程/数模竞赛获奖和顶会论文者优先

有多模态大模型预训练/微调经验者优先
有推荐系统落地经验者优先
有搜索引擎落地经验者优先

AI 洞察

优缺点分析

优点

  • 平台优势:字节跳动拥有海量数据和丰富场景,算法落地机会多,影响力大
  • 薪酬竞争力强:资深专家岗位薪资处于行业顶尖水平,股权激励等福利优厚
  • 团队实力:与顶级算法人才协作,学习氛围浓厚,可获得顶会发表机会
  • 工作强度较大:互联网大厂节奏快,可能面临加班和高压
  • 技术迭代迅速:需持续跟踪前沿论文,保持学习状态,否则容易被淘汰
  • 跨团队协作多:需要与产品、工程、设计等多方沟通,对协调能力要求高

缺点 / 挑战

  • 技术前沿:接触大规模多模态模型和推荐系统,挑战性强,技术成长快
  • 适合热爱挑战、具备深厚算法功底和自驱力的技术专家,能适应快节奏并追求技术突破

角色解读

  • 技术专家路线:深耕多模态和推荐方向,成为领域内权威,主导核心算法突破
  • 技术管理路线:积累项目主导经验,向技术Leader或AI架构师方向发展
  • 业务创新路线:结合剪映业务,探索视频创作智能化新场景,孵化创新产品
  • 设计和构建多模态大模型,包括预训练、指令微调、模型加速和Prompt工程,推动模型在视频创作场景中的应用
  • 改进推荐系统全链路,从表征学习到召回、排序,提升内容与用户的匹配效率
  • 应用NLP和多模态内容表示算法,优化综合搜索和垂直搜索的推荐词效果,理解用户剪辑意图
  • 结合计算机视觉和深度学习技术,产出并落地智能化剪辑方案,与团队协作交付业务价值
  • 扎实的多模态和大语言模型知识,熟悉RAG、SFT、RLHF等常用技术
  • 精通推荐算法,如CF、MF、FM、GBDT、DNN、Wide&Deep,并有落地经验
  • 优秀的编程能力,熟练使用Python/C++,掌握数据结构和算法基础
  • 了解搜索引擎和向量数据库,具备搜索相关技术应用能力

申请策略

  • 提前了解剪映的功能和用户群,思考AI技术如何改善剪辑体验,准备相关想法
  • 在面试中展示对业务的理解,不局限于算法本身,体现技术与产品结合的能力
  • 突出多模态预训练或微调项目经历,详细展示你在模型设计、训练和优化中的具体贡献
  • 强调推荐系统落地案例,用量化指标体现效果提升,如点击率、转化率增长
  • 展示顶会论文或编程/数模竞赛获奖,体现学术能力和问题解决实力
  • 写出熟悉的编程语言和工具链,特别是Python/C++、深度学习框架、向量数据库
  • 补充RAG、SFT、RLHF等大模型关键技术,动手实践中小规模微调
  • 熟悉ElasticSearch和向量数据库的应用,了解搜索召回和排序原理

面试指南

  • 用STAR法则描述项目:情境、任务、行动、结果,突出你的个人贡献和量化成果
  • 技术问题从原理讲到实践,先阐述算法思想,再结合你的落地经验说明关键点
  • 开放性问题展现思考深度,将技术趋势与业务场景结合,给出有依据的预判
  • 请介绍你最近负责的多模态项目,包括技术选型、训练过程和遇到的挑战
  • 如何设计推荐系统的召回和排序流程?如何评估效果?
  • 如何利用大语言模型提升搜索相关性?请给出具体方案
  • 如何优化多模态模型的推理速度以支持线上服务?
  • 你如何看待多模态技术在未来视频内容创作中的发展?

职位点评

70
综合评分

高薪前沿技术岗,发展机会巨大,但工作强度高,适合技术与事业驱动型人才。

从薪资福利、成长空间、工作节奏和岗位方向综合评估,方便横向比较。

更适合这类人
最适合追求技术精进和职业快速成长的求职者,同时需要接受高强度工作节奏。
表现最好
成长发展
相对薄弱
工作生活
薪资福利75
成长发展92
工作生活35
使命价值65

薪资福利

75中等

薪资未在JD中明示,但字节跳动对顶尖算法专家的薪酬极具竞争力,福利体系完善。

薪资信号未披露(AI估算:45K-80K/月)

成长发展

92较高

岗位处于多模态和推荐算法的技术前沿,有大量实践机会,成长空间巨大。

技术前沿前沿/新兴技术
技术栈多模态、LLM、推荐系统、RAG、SFT、RLHF、Prompt
业务类型profit_center

工作生活

35较低

JD未提及工作生活平衡,大厂算法岗位通常强度较高,工时不确定性大。

工作模式未明确
办公地点未明确
加班情况未提及(无法判断)

使命价值

65中等

行业处于高速增长期,但岗位使命偏商业落地,社会使命感有限。

行业发展高速增长赛道
社会影响中性/一般
创新程度积极采用新技术
Watch Jobs