蚂蚁集团-医疗多模态应用算法-健康事业群

优缺点分析

角色解读

• 可从算法工程师成长为高级算法专家或技术负责人
• 医疗AI领域垂直发展，成为行业资深专家
• 有机会参与前沿大模型研究，转向研究科学家方向
• 研发医疗多模态大模型，处理图文、语音、视频等数据，进行模型预训练和优化
• 开发医疗AI产品，如报告解读、皮肤识别、影像分析，提升医疗效率
• 研究前沿技术，探索AI在医疗普惠中的应用
• 扎实的机器学习、深度学习和强化学习理论基础
• 熟练使用Python或Java，掌握TensorFlow或PyTorch等深度学习框架
• 有主流多模态模型（如QwenVL、InternVL）的实战经验
• 具备工程化能力，能处理海量数据并部署模型

申请策略

• 了解蚂蚁集团医疗健康业务，关注支付宝医疗产品的动态
• 面试中展示对AI医疗普惠的理解和热情
• 突出多模态大模型项目经验，如使用QwenVL、InternVL等模型
• 强调预训练、SFT、GRPO等后训练技术的实操经验
• 展示顶会论文或开源项目贡献，体现研究能力
• 如有医疗领域应用经验，需重点描述业务场景和效果
• 补充医疗图像、文本处理领域的相关知识
• 熟悉最新多模态模型架构和训练技巧，如LLaVA、Qwen-VL

面试指南

• 使用STAR法则：情境（Situation）、任务（Task）、行动（Action）、结果（Result）来结构化回答项目经验
• 强调技术深度和业务结合，体现解决问题的能力
• 展示对前沿技术的思考，如大模型的对齐、推理效率等
• 请详细说明你参与过的多模态大模型项目，你的具体角色和贡献是什么？
• 如何设计一个医疗图像识别模型？数据如何获取和处理？
• 你了解GRPO吗？它与PPO有何区别和联系？
• 如何评估一个医疗AI产品的效果？有哪些关键指标？
• 你对AI在医疗领域的哪些应用最感兴趣？为什么？