
天猫
业务技术-语音算法专家-直播
业务技术-语音算法专家-直播
发布于 33 分钟前普通员工/个人贡献者
全职员工仅现场办公语音交互
语音交互
全双工交互
数字人
电商直播
端到端大模型
语音合成 (Tts)
值不值得投
75综合评分
综合评分 75
高薪前沿技术岗,侧重AI落地与性能优化,工作强度较大
从薪资福利、成长发展、工作生活和使命价值四个维度综合评估,方便横向比较。
薪资怎么样
参考估算薪资
根据职位描述推断,供对比参考
发布情况
新岗位 · 今天发布
公司情况
这家公司招聘很活跃
约 250 个在招
市场机会
选择不多
杭州 · 语音交互 · 1 个在招
职位详情
关于这个职位
负责淘宝直播数字人的TTS系统研发,构建全双工语音交互架构及端到端大模型
重点突破多情感高表现力语音建模,优化实时低延时性能,并将技术应用于智能导购等场景,提升用户互动与转化
最低要求
计算机、人工智能、信号处理等相关专业硕士或博士学历
在语音合成、语音识别或对话系统领域有扎实的技术沉淀
熟悉全双工交互关键技术,包括高性能 VAD 算法、回声消除原理、打断机制逻辑及状态机管理
精通 Python、C++,具备优秀的编程习惯及算法落地能力
对电商直播行业有一定了解,有数字人项目经验者优先
工作职责
高表现力语音合成系统开发:负责淘宝直播数字人的TTS系统研发,重点突破多情感、高表现力、极具电商直播感染力的语音建模,实现语速、重音、情感的动态可控
全双工交互系统构建:设计并实现数字人全双工语音交互架构,包括语音活动检测、打断唤醒、交互逻辑控制等,提升数字人在直播场景下的即时互动感
端到端交互大模型研发:参与并研究应用端到端语音大模型,探索流式语音输入与输出的深度融合,解决传统级联模型的语义割裂与延迟问题
极致性能优化:针对直播实时性要求,优化语音全链路延迟,从模型压缩、推理加速到流式处理,保障低延时体验
场景化落地:与产品和工程团队紧密配合,将全双工交互技术应用于直播间智能导购、等业务场景,提升用户留存与转化
AI 洞察
优缺点分析
优点
- 平台巨大:依托淘宝直播海量用户和数据,技术落地场景丰富,影响力大
- 技术前沿:涉及端到端大模型、全双工交互等AI领域最新热点,技术含金量高
- 资源充足:巨头企业通常提供充足的算力资源和顶尖的技术团队支持
- 适合在语音/AI领域有深厚积累,追求技术落地影响力,能承受高强度快节奏工作的专家型人才
缺点 / 挑战
- 实时性要求极高:直播场景对延迟极其敏感,性能优化压力巨大
- 业务导向强:需紧密配合产品团队,技术需直接服务于GMV和用户留存,KPI压力大
- 竞争激烈:作为核心业务部门,内部竞争和工作强度可能较高
角色解读
- 成为语音交互领域的资深专家,主导前沿大模型在垂直场景的落地
- 向技术管理方向发展,带领团队攻克更复杂的实时交互难题
- 拓展至更广泛的AIGC或元宇宙交互方向,成为跨模态交互的技术领军人物
- 研发淘宝直播数字人的TTS系统,实现多情感、高表现力的语音合成
- 构建全双工语音交互架构,处理VAD、回声消除及打断逻辑,提升实时互动体验
- 研究并应用端到端语音大模型,优化流式处理以降低延迟
- 将语音技术落地于智能导购等场景,通过技术手段提升用户留存与转化率
- 扎实的语音合成(TTS)、语音识别(ASR)或对话系统理论基础
- 精通全双工交互关键技术,如高性能VAD算法、回声消除及状态机管理
- 熟练掌握Python和C++,具备优秀的算法落地与工程实践能力
- 了解电商直播行业特性,有数字人或相关AI项目经验者优先
申请策略
- 关注阿里在AIGC和虚拟人领域的最新动态,面试时可结合这些趋势阐述观点
- 准备具体的技术难点攻克案例,体现解决复杂问题的能力
- 突出在TTS、ASR或对话系统中的具体研究成果和项目经验,尤其是量化指标(如延迟降低多少、效果提升多少)
- 强调全双工交互相关的技术细节,如VAD算法优化、回声消除方案等
- 展示Python/C++的工程落地能力,特别是大规模模型部署和性能优化的案例
- 如有数字人或电商直播相关项目经验,务必重点描述
- 深入理解端到端语音大模型的最新进展(如VITS, FastSpeech 2等变体及LLM结合方案)
- 强化实时音频处理系统的工程优化技巧,如算子融合、内存管理等
面试指南
- 使用STAR法则(情境、任务、行动、结果)结构化回答项目经验,重点突出个人在其中的技术决策和最终成果
- 针对技术问题,先阐述基本原理,再结合具体场景分析难点,最后给出优化方案和预期效果
- 展现对业务价值的理解,说明技术方案如何服务于用户体验和商业目标
- 请详细介绍你过往在TTS或语音交互项目中的核心贡献和技术选型理由
- 在全双工交互中,如何处理用户打断后的上下文恢复和状态同步?
- 如何优化端到端大模型的推理延迟以满足直播实时性要求?
- 面对电商直播中复杂的噪声环境和多变的情感需求,你的模型策略是什么?
- 请分享一个你通过技术手段显著提升用户体验或业务指标的案例
职位点评
薪资福利85
成长发展90
工作生活40
使命价值70
薪资福利
85较高
作为巨头企业的专家级岗位,薪资水平处于市场高位,且通常伴随完善的福利体系和稳定性,对补偿性动机满足度很高。
薪资信号偏高 (6.0千–10.0万/月)
成长发展
90较高
岗位涉及端到端大模型、全双工交互等前沿技术,且在高并发、低延时的极限场景下落地,技术成长空间极大。
技术前沿前沿/新兴技术
技术栈端到端大模型、全双工交互、VAD、TTS、Python、C++
业务类型profit_center
工作生活
40较低
互联网大厂核心业务部门,直播场景对实时性要求极高,通常意味着较高的工作强度和可能的加班文化,WLB一般。
工作模式未明确
办公地点科技园/产业园
加班情况JD含高强度暗示词
使命价值
70中等
通过技术创新提升直播互动体验和用户转化,具有明确的商业价值和社会影响力,但主要服务于商业目的。
行业发展稳定成熟行业
社会影响中性/一般
创新程度积极采用新技术
天猫 的其他在招职位
相似职位推荐
Watch Jobs