哈啰出行
训推平台工程师
训推平台工程师
发布于 大约 16 小时前普通员工/个人贡献者
北京市 / 上海市
高级经验
全职员工
仅现场办公
学历未注明
PyTorch
NCCL
分布式训练
UCX
DDP
Volcano
Argo Workflows
AI 估算 · 30k–45k
高级分布式训练工程师稀缺，互联网大厂薪资竞争力强，北京上海一线城市加成。
职位详情
关于这个职位
该职位负责构建和优化大规模分布式训练平台，涉及Argo Workflows、Volcano和PyTorch DDP等技术栈
适合有Kubernetes和分布式训练背景的工程师，参与自动驾驶等前沿领域的高性能计算基础设施开发
最低要求
● 熟悉 Argo Workflows、Volcano
● 具备 PyTorch 分布式训练经验
● 理解 NCCL / UCX
● 熟练掌握 Kubernetes
工作职责
● 构建端到端训练流水线（Argo Workflows）
● 基于 Volcano 实现 gang、拓扑感知、抢占调度
● 优化 PyTorch 分布式训练性能（DDP）
优先资格
● 大规模分布式训练或自动驾驶训练经验
AI 洞察
优缺点分析
- 掌握前沿技术栈（K8s、PyTorch、Volcano），市场价值高
- 参与自动驾驶等热门领域的基础设施建设，项目含金量高
- 哈啰出行平台大，资源丰富，有充足的学习和成长空间
- 技术难度高，需要对底层系统有深入理解，学习曲线陡峭
- 大规模分布式训练调试复杂，需要强大的问题排查能力
- 工作节奏可能较快，需应对业务压力和技术攻关
- 适合热爱底层系统、分布式计算和性能优化，有较强自驱力和技术热情的高级工程师
角色解读
- 技术深耕：成为分布式训练/高性能计算领域的专家
- 架构演进：从单一平台到AI基础设施架构师，主导系统设计
- 跨领域发展：向自动驾驶、大模型训练等前沿方向拓展
- 设计并实现端到端的机器学习训练流水线，使用Argo Workflows编排任务
- 基于Volcano进行资源调度优化，包括gang调度、拓扑感知和抢占策略
- 深入优化PyTorch分布式训练性能，如DDP和NCCL通信调优
- 与算法团队协作，支撑大规模训练任务，特别是自动驾驶场景
- 精通Kubernetes和云原生生态，能管理容器编排和资源调度
- 掌握分布式训练框架PyTorch及其性能调优方法
- 理解NCCL/UCX底层通信原理，能诊断通信瓶颈
- 有实际使用Argo Workflows、Volcano等调度工具的经验
申请策略
- 投递前了解哈啰出行的AI基础设施现状，思考如何用你的经验带来改进
- 准备一两个通过架构优化提升训练效率的案例，展示工程思维
- 突出Kubernetes和Volcano的实际使用经验，特别是调度优化案例
- 强调PyTorch分布式训练项目成果，如加速比、通信优化等
- 展示对NCCL/UCX的理解，可附带相关性能分析报告
- 若有自动驾驶或超大集群训练经验，务必重点描述
- 若缺乏Volcano经验，可提前学习其调度原理和配置
- 深入理解PyTorch DDP源码，掌握常见性能瓶颈的定位方法
面试指南
- 从需求分析入手，先说明场景约束和目标，再给出方案对比和最终选择
- 结合实际项目经验，具体陈述遇到的问题、分析过程和量化结果
- 展示系统性思维：不仅说出答案，还要说明权衡和扩展性考虑
- 如何设计一个支持千卡级分布式训练的任务流水线？
- PyTorch DDP中梯度同步的通信瓶颈如何优化？
- Volcano的gang调度和拓扑感知调度的原理与实现？
- NCCL中Ring/AllReduce算法对比及实践调优？
- 你在Kubernetes上运行大规模训练遇到过什么挑战？如何解决的？
匹配度报告
66
综合匹配度
高成长性岗位，前沿技术栈，薪资有竞争力，但WLB较弱。
适合人群
最适合追求技术成长和职业发展的工程师，愿意接受较强的工作强度和不确定性。
最强匹配
成长发展匹配
最弱匹配
工作生活匹配
薪资福利75
成长发展90
工作生活40
使命价值60
薪资福利匹配
75中等
薪资水平属于市场偏高，但福利信息未披露，稳定性一般（互联网行业）。
薪资信号未披露 (30K-45K/月)
成长发展匹配
90较高
技术栈前沿，涉及分布式训练、云原生调度，成长空间大。
技术前沿前沿/新兴技术
技术栈Argo Workflows、Volcano、PyTorch、Kubernetes、NCCL、UCX
业务类型ambiguous
工作生活匹配
40较低
仅现场办公，未提及弹性或WLB，互联网公司工作强度可能较高。
工作模式仅现场办公
办公地点未明确
加班情况未提及（无法判断）
使命价值匹配
60中等
自动驾驶训练属于新兴领域，有一定社会影响力，但职位本身偏技术基础设施，使命感一般。
行业发展高速增长赛道
社会影响中性/一般
创新程度积极采用新技术
Watch Jobs