天猫事业部-AI业务评测-天猫国际供应链

优缺点分析

角色解读

• 可向AI产品经理、算法策略专家或供应链数字化负责人方向发展，成为连接技术与业务的复合型高端人才
• 构建和维护天猫国际供应链场景下的AI评测体系，确保AI模型在实际业务中的准确性和安全性
• 熟练掌握SQL进行数据挖掘与分析，深入理解大模型原理及常见缺陷（如幻觉），具备将业务逻辑转化为可量化评测指标的能力

申请策略

• 准备案例说明如何发现并解决AI在实际业务中的‘幻觉’或‘错误决策’问题，体现闭环思维
• 突出SQL数据分析能力，展示过往在AI评测、模型审计或供应链优化方面的具体项目成果，强调业务抽象能力
• 深入学习LLM评测方法论（如RAGAS等框架），熟悉供应链基础业务流程（补货、库存周转等）

面试指南

• 采用STAR法则（情境-任务-行动-结果），重点阐述从业务痛点出发，定义评测标准，通过数据验证发现问题，最终推动模型迭代优化的完整闭环
• 请举例说明你如何设计一个AI模型的评测指标体系？
• 在大模型应用中，你是如何识别和处理‘幻觉’问题的？
• 当AI决策与业务规则冲突时，你会如何分析和解决？
• 如何用SQL快速定位某个供应链环节的数据异常？
• 复习大模型基础知识（Prompt工程、RAG、Agent），熟悉常见的AI评测数据集构建方法，了解天猫国际供应链的基本业务模式