
阿里巴巴
业务技术-语音算法专家-直播
业务技术-语音算法专家-直播
发布于 1 天前普通员工/个人贡献者
全职员工仅现场办公语音交互
语音交互
Vad算法
全双工交互
数字人
端到端大模型
语音合成 (Tts)
语音识别
值不值得投
75综合评分
综合评分 75
顶尖大厂核心算法岗,技术前沿且业务价值高,薪酬丰厚但工作强度大,适合技术极客。
从薪资福利、成长发展、工作生活和使命价值四个维度综合评估,方便横向比较。
薪资怎么样
参考估算薪资
根据职位描述推断,供对比参考
发布情况
新岗位 · 昨天发布
公司情况
这家公司招聘很活跃
约 5060 个在招 · 其中语音交互 2 个
市场机会
选择不多
杭州 · 语音交互 · 3 个在招
职位详情
关于这个职位
负责淘宝直播数字人的TTS系统研发,突破多情感、高表现力语音建模
构建全双工交互架构及端到端语音大模型,解决实时性延迟问题
优化语音全链路性能,推动技术在智能导购等场景落地,提升用户互动与转化
最低要求
计算机、人工智能、信号处理等相关专业硕士或博士学历
在语音合成、语音识别或对话系统领域有扎实的技术沉淀
熟悉全双工交互关键技术,包括高性能 VAD 算法、回声消除原理、打断机制逻辑及状态机管理
精通 Python、C++,具备优秀的编程习惯及算法落地能力
对电商直播行业有一定了解,有数字人项目经验者优先
工作职责
高表现力语音合成系统开发:负责淘宝直播数字人的TTS系统研发,重点突破多情感、高表现力、极具电商直播感染力的语音建模,实现语速、重音、情感的动态可控
全双工交互系统构建:设计并实现数字人全双工语音交互架构,包括语音活动检测、打断唤醒、交互逻辑控制等,提升数字人在直播场景下的即时互动感
端到端交互大模型研发:参与并研究应用端到端语音大模型,探索流式语音输入与输出的深度融合,解决传统级联模型的语义割裂与延迟问题
极致性能优化:针对直播实时性要求,优化语音全链路延迟,从模型压缩、推理加速到流式处理,保障低延时体验
场景化落地:与产品和工程团队紧密配合,将全双工交互技术应用于直播间智能导购、等业务场景,提升用户留存与转化
AI 洞察
优缺点分析
优点
- 平台巨大:依托淘宝直播海量用户和数据,技术落地场景丰富且影响力深远
- 技术前沿:接触端到端大模型、数字人等AI前沿技术,保持技术竞争力
- 资源充足:大厂提供充足的算力资源和顶级工程师协作环境
- 职业背书:在头部互联网大厂的核心算法岗位经历,极具简历含金量
- 技术迭代快:需持续跟进最新的大模型和语音技术,学习成本高
- 竞争激烈:内部晋升和外部竞争都较为激烈,对产出要求严格
缺点 / 挑战
- 性能压力极大:直播场景对实时性和低延迟要求极高,优化难度大
- 工作强度:互联网大厂核心部门通常伴随较高的工作节奏和压力
- 适合在语音算法领域有深厚积累、追求技术挑战、能适应高强度快节奏工作的资深算法工程师
角色解读
- 成为语音交互领域的资深专家,主导前沿大模型在垂直场景的应用
- 向技术管理方向发展,带领团队攻克更复杂的实时交互难题
- 拓展至更广泛的AIGC或元宇宙交互领域,成为跨模态交互的技术领军者
- 研发淘宝直播数字人的TTS系统,实现高表现力、多情感的语音合成
- 构建全双工语音交互架构,优化VAD、回声消除等技术,提升实时互动体验
- 探索端到端语音大模型应用,解决传统模型的延迟和语义割裂问题
- 优化语音全链路性能,降低延迟,并将技术落地于智能导购等直播场景
- 扎实的语音合成(TTS)、语音识别(ASR)或对话系统理论基础
- 精通全双工交互关键技术,如高性能VAD、回声消除、打断机制
- 熟练掌握Python和C++,具备优秀的算法落地和工程实践能力
- 了解电商直播行业特性,有数字人项目经验者优先
申请策略
- 准备详细的项目案例,重点阐述如何解决‘实时性’和‘表现力’这两个核心痛点
- 关注阿里达摩院或淘天集团最新的AI研究成果,面试中可适当引用以展示热情和专业度
- 突出在TTS、ASR或对话系统中的具体项目成果,尤其是量化指标(如延迟降低多少、效果提升多少)
- 强调全双工交互相关的技术细节,如VAD算法优化、回声消除方案等
- 展示Python/C++的工程落地能力,特别是大规模模型部署和性能优化经验
- 若有数字人或直播相关项目经验,务必重点描述,体现业务理解
- 深入研究端到端语音大模型的最新进展(如SpeechLM, Voicebox等)
- 强化实时音频处理系统的性能优化技巧,熟悉模型压缩和推理加速框架
面试指南
- STAR法则:情境-任务-行动-结果,清晰描述项目背景、你的角色、采取的技术手段及最终达成的量化效果
- 深度剖析:不仅讲‘做了什么’,更要讲‘为什么这么做’,对比其他方案的优劣,体现技术选型思考
- 结合业务:将技术优化与业务价值(如用户停留时长、转化率)联系起来,展示业务敏感度
- 请详细介绍你过往在TTS或语音交互方面的核心贡献和技术难点突破
- 在全双工交互中,如何处理VAD误检和回声消除的平衡?
- 端到端大模型相比传统级联模型有哪些优势和挑战?你如何优化其推理延迟?
- 针对直播场景的低延迟要求,你在模型压缩或推理加速方面有哪些实践经验?
- 如果让你设计一个具有高表现力的数字人语音系统,你会考虑哪些关键因素?
职位点评
薪资福利85
成长发展90
工作生活40
使命价值70
薪资福利
85较高
作为已上市的巨头企业,提供具有市场竞争力的薪酬包,包含高额奖金和股票期权,整体补偿水平处于行业顶尖梯队。
薪资信号偏高 (6.0千–12.0万/月)
成长发展
90较高
岗位涉及端到端大模型、数字人等前沿技术领域,技术栈先进,且背靠阿里庞大的数据和应用场景,个人技术成长空间巨大。
技术前沿前沿/新兴技术
技术栈端到端语音大模型、TTS、全双工交互、VAD、数字人
业务类型profit_center
工作生活
40较低
互联网大厂核心研发岗位,通常工作节奏较快,虽然JD未明确提及加班,但‘极致性能优化’和‘实时性要求’暗示了较高的工作压力,WLB相对一般。
工作模式未明确
办公地点科技园/产业园
加班情况JD含高强度暗示词
使命价值
70中等
通过技术手段提升电商直播的用户体验和互动效率,直接服务于亿万消费者的购物娱乐需求,具有一定的商业价值和社会影响力。
行业发展稳定成熟行业
社会影响中性/一般
创新程度积极采用新技术
阿里巴巴 的其他在招职位
相似职位推荐
Watch Jobs