Tmall logo
天猫
业务技术-语音算法专家-直播

业务技术-语音算法专家-直播

发布于 33 分钟前

普通员工/个人贡献者

AI 估算 · 6.0–10.0万 · AI 参考估算
专家级经验
硕士
全职员工仅现场办公语音交互
语音交互
全双工交互
数字人
电商直播
端到端大模型
语音合成 (Tts)

值不值得投

75综合评分

综合评分 75

高薪前沿技术岗,侧重AI落地与性能优化,工作强度较大

从薪资福利、成长发展、工作生活和使命价值四个维度综合评估,方便横向比较。

薪资怎么样

参考估算薪资

根据职位描述推断,供对比参考

发布情况

新岗位 · 今天发布

公司情况

这家公司招聘很活跃

约 250 个在招

市场机会

选择不多

杭州 · 语音交互 · 1 个在招

职位详情

关于这个职位

负责淘宝直播数字人的TTS系统研发,构建全双工语音交互架构及端到端大模型

重点突破多情感高表现力语音建模,优化实时低延时性能,并将技术应用于智能导购等场景,提升用户互动与转化

最低要求

计算机、人工智能、信号处理等相关专业硕士或博士学历

在语音合成、语音识别或对话系统领域有扎实的技术沉淀
熟悉全双工交互关键技术,包括高性能 VAD 算法、回声消除原理、打断机制逻辑及状态机管理
精通 Python、C++,具备优秀的编程习惯及算法落地能力
对电商直播行业有一定了解,有数字人项目经验者优先

工作职责

高表现力语音合成系统开发:负责淘宝直播数字人的TTS系统研发,重点突破多情感、高表现力、极具电商直播感染力的语音建模,实现语速、重音、情感的动态可控

全双工交互系统构建:设计并实现数字人全双工语音交互架构,包括语音活动检测、打断唤醒、交互逻辑控制等,提升数字人在直播场景下的即时互动感
端到端交互大模型研发:参与并研究应用端到端语音大模型,探索流式语音输入与输出的深度融合,解决传统级联模型的语义割裂与延迟问题
极致性能优化:针对直播实时性要求,优化语音全链路延迟,从模型压缩、推理加速到流式处理,保障低延时体验
场景化落地:与产品和工程团队紧密配合,将全双工交互技术应用于直播间智能导购、等业务场景,提升用户留存与转化

AI 洞察

优缺点分析

优点

  • 平台巨大:依托淘宝直播海量用户和数据,技术落地场景丰富,影响力大
  • 技术前沿:涉及端到端大模型、全双工交互等AI领域最新热点,技术含金量高
  • 资源充足:巨头企业通常提供充足的算力资源和顶尖的技术团队支持
  • 适合在语音/AI领域有深厚积累,追求技术落地影响力,能承受高强度快节奏工作的专家型人才

缺点 / 挑战

  • 实时性要求极高:直播场景对延迟极其敏感,性能优化压力巨大
  • 业务导向强:需紧密配合产品团队,技术需直接服务于GMV和用户留存,KPI压力大
  • 竞争激烈:作为核心业务部门,内部竞争和工作强度可能较高

角色解读

  • 成为语音交互领域的资深专家,主导前沿大模型在垂直场景的落地
  • 向技术管理方向发展,带领团队攻克更复杂的实时交互难题
  • 拓展至更广泛的AIGC或元宇宙交互方向,成为跨模态交互的技术领军人物
  • 研发淘宝直播数字人的TTS系统,实现多情感、高表现力的语音合成
  • 构建全双工语音交互架构,处理VAD、回声消除及打断逻辑,提升实时互动体验
  • 研究并应用端到端语音大模型,优化流式处理以降低延迟
  • 将语音技术落地于智能导购等场景,通过技术手段提升用户留存与转化率
  • 扎实的语音合成(TTS)、语音识别(ASR)或对话系统理论基础
  • 精通全双工交互关键技术,如高性能VAD算法、回声消除及状态机管理
  • 熟练掌握Python和C++,具备优秀的算法落地与工程实践能力
  • 了解电商直播行业特性,有数字人或相关AI项目经验者优先

申请策略

  • 关注阿里在AIGC和虚拟人领域的最新动态,面试时可结合这些趋势阐述观点
  • 准备具体的技术难点攻克案例,体现解决复杂问题的能力
  • 突出在TTS、ASR或对话系统中的具体研究成果和项目经验,尤其是量化指标(如延迟降低多少、效果提升多少)
  • 强调全双工交互相关的技术细节,如VAD算法优化、回声消除方案等
  • 展示Python/C++的工程落地能力,特别是大规模模型部署和性能优化的案例
  • 如有数字人或电商直播相关项目经验,务必重点描述
  • 深入理解端到端语音大模型的最新进展(如VITS, FastSpeech 2等变体及LLM结合方案)
  • 强化实时音频处理系统的工程优化技巧,如算子融合、内存管理等

面试指南

  • 使用STAR法则(情境、任务、行动、结果)结构化回答项目经验,重点突出个人在其中的技术决策和最终成果
  • 针对技术问题,先阐述基本原理,再结合具体场景分析难点,最后给出优化方案和预期效果
  • 展现对业务价值的理解,说明技术方案如何服务于用户体验和商业目标
  • 请详细介绍你过往在TTS或语音交互项目中的核心贡献和技术选型理由
  • 在全双工交互中,如何处理用户打断后的上下文恢复和状态同步?
  • 如何优化端到端大模型的推理延迟以满足直播实时性要求?
  • 面对电商直播中复杂的噪声环境和多变的情感需求,你的模型策略是什么?
  • 请分享一个你通过技术手段显著提升用户体验或业务指标的案例

职位点评

薪资福利85
成长发展90
工作生活40
使命价值70

薪资福利

85较高

作为巨头企业的专家级岗位,薪资水平处于市场高位,且通常伴随完善的福利体系和稳定性,对补偿性动机满足度很高。

薪资信号偏高 (6.0千–10.0万/月)

成长发展

90较高

岗位涉及端到端大模型、全双工交互等前沿技术,且在高并发、低延时的极限场景下落地,技术成长空间极大。

技术前沿前沿/新兴技术
技术栈端到端大模型、全双工交互、VAD、TTS、Python、C++
业务类型profit_center

工作生活

40较低

互联网大厂核心业务部门,直播场景对实时性要求极高,通常意味着较高的工作强度和可能的加班文化,WLB一般。

工作模式未明确
办公地点科技园/产业园
加班情况JD含高强度暗示词

使命价值

70中等

通过技术创新提升直播互动体验和用户转化,具有明确的商业价值和社会影响力,但主要服务于商业目的。

行业发展稳定成熟行业
社会影响中性/一般
创新程度积极采用新技术
Watch Jobs