
蚂蚁集团
蚂蚁集团-语音交互智能体算法工程师-杭州/上海
蚂蚁集团-语音交互智能体算法工程师-杭州/上海
发布于 大约 14 小时前普通员工/个人贡献者
杭州市 / 上海市
高级经验
全职员工
仅现场办公
学历未注明
软件工程
Cvpr
Dpo
Grpo
Icassp
Icml
Pytorch
Sft
Tensorflow
多模态表征
AI 估算 · 35k–70k
蚂蚁集团大厂,算法岗位薪资较高,杭州/上海一线城市,岗位要求高,预计薪资中上水平。
职位详情
关于这个职位
该职位主要负责蚂蚁集团资金风控场景下的语音交互智能体算法研发,涉及全双工语音通话、多模态表征学习、强化学习等前沿AI技术
你将基于Omini模型建设端到端语音交互能力,开发Tool调用和记忆管理方案,并识别用户情绪与风险不一致性
适合对语音交互和智能体方向有深入研究的算法工程师
最低要求
对Omini模型有后训练经验,SFT、DPO、GRPO等
有智能体Tool调用、记忆压缩的优化经验
熟练掌握PyTorch、Tensorflow开发工具
工作职责
在KA风险管理、个人欺诈场景、收单欺诈、欺诈追金场景,基于Omini模型建设端到端语音交互能力
开发语音智能体的tool调用、记忆管理方案,提升交互质量
在语音交互过程中,识别用户的情绪、谎言和风险不一致性,提升交互完成率
优先资格
在ICASSP、CVPR、ICML等顶会有论文发表者优先
AI 洞察
优缺点分析
优点
- 涉及全双工语音、多模态、强化学习等AI前沿方向,技术成长空间大
- 蚂蚁集团平台大、资源多,数据丰富,落地场景真实且业务价值高
- 团队氛围技术导向,鼓励顶会论文发表,学术与工程结合紧密
- 语音交互系统涉及端到端实时性,工程实现难度高
- 岗位要求高,需要同时精通后训练、智能体、语音等多个技术栈
缺点 / 挑战
- 风控场景对效果要求极高,需要处理复杂对抗环境,模型鲁棒性挑战大
- 适合对语音交互、多模态、强化学习有深入研究,喜欢挑战高难度技术问题,希望在工业界前沿场景中快速成长的算法工程师
角色解读
- 可向资深算法专家或技术Leader方向发展,主导风控AI系统的架构设计与创新
- 积累多模态、强化学习、对话系统等前沿技术,有机会向通用AI Agent领域拓展
- 在蚂蚁集团内部可跨业务线轮岗,接触支付、信贷、保险等更多风控场景
- 负责资金风控场景下语音交互智能体的算法研发,基于Omini模型构建端到端语音对话能力
- 开发智能体的工具调用和记忆管理机制,提升交互连贯性与任务完成率
- 在交互中识别用户情绪、谎言及风险不一致性,优化风控决策
- 精通Omini模型的后训练技术,包括SFT、DPO、GRPO等强化学习对齐方法
- 具备智能体系统开发经验,熟悉Tool调用、记忆压缩等方案
- 熟练使用PyTorch或Tensorflow等深度学习框架
申请策略
- 关注蚂蚁集团的风控业务场景,在面试中展示自己对黑灰产对抗的理解
- 准备一个端到端语音交互Demo或项目案例,展示工程能力
- 突出在Omini模型或大语言模型上的后训练(SFT/DPO/GRPO)项目经验
- 详述智能体系统设计经验,特别是Tool调用、记忆管理、对话状态追踪等
- 强调顶会论文发表记录,尤其是ICASSP、CVPR、ICML等与语音或多模态相关的论文
- 若缺少语音交互经验,可补充学习语音识别、语音合成、全双工通信等相关知识
- 加强强化学习理论与实践,特别是多轮对话中的RL调优方法
- 熟悉Multi-turn RL、长记忆压缩等最新研究,阅读相关论文
面试指南
- 对于对比型问题(如SFT vs DPO),先定义每个概念,再对比优缺点,最后结合你的实践经历说明选择依据
- 对于系统设计方案,采用从需求出发,逐步细化模块,强调trade-off和工程落地的思路
- 对于开放性问题,先分析问题本质,再提出多种候选方案,最后给出你的推荐及理由
- 请详细说明Omini模型后训练中SFT、DPO、GRPO的区别及适用场景
- 如何设计一个高效的智能体Tool调用机制?请举例说明
- 在语音交互中识别用户情绪和谎言,你会采用哪些技术路线?
- 请描述一个你解决过的多模态表征学习问题,以及你使用的模型架构
- 如果用户故意对抗(如语音变声、背景噪声),你的系统如何保证鲁棒性?
职位点评
78
综合评分
前沿语音交互智能体算法岗,技术成长极高,薪资丰厚,但工作强度可能较大且需现场办公。
从薪资福利、成长空间、工作节奏和岗位方向综合评估,方便横向比较。
更适合这类人
适合追求技术成长和前沿研究方向,愿意接受适度工作压力,对风控业务感兴趣的技术型求职者。
表现最好
成长发展
相对薄弱
工作生活
薪资福利85
成长发展95
工作生活50
使命价值70
薪资福利
85较高
薪资处于互联网大厂算法岗领先水平,福利完善(五险一金、补充医疗等),但未明确具体薪资,稳定性高。
薪资信号未披露(AI估算:35K-70K/月)
成长发展
95较高
技术栈前沿,涉及Omini、多模态、强化学习等新兴方向,鼓励顶会发文,成长空间极大。
技术前沿前沿/新兴技术
技术栈Omini模型、SFT、DPO、GRPO、多模态表征、强化学习、全双工语音
成长机会顶会有论文发表者优先
业务类型profit_center
工作生活
50较低
杭州、上海现场办公,未提及弹性工作或远程选项,大厂通常有一定工作压力。
工作模式仅现场办公
办公地点科技园/产业园
加班情况未提及(无法判断)
使命价值
70中等
反黑灰产风控具有社会价值,打击欺诈保护用户财产,但岗位直接创新程度取决于业务需求。
行业发展高速增长赛道
社会影响正向社会影响力较高
使命信号提升风控水位和用户体验
创新程度积极采用新技术
蚂蚁集团 的其他在招职位
相似职位推荐
Watch Jobs