IBG Food-数据分析实习生（7）

优缺点分析

角色解读

• 从Agent评测实习生起步，可向AI产品经理或数据科学方向深入
• 积累LLM应用和数据基建经验，有望转正成为核心团队成员
• 未来可转向AI算法工程师或AI数据架构师等方向
• 构建Agent评测体系，设计准确率、推理链合理性等核心指标，搭建评测Pipeline
• 参与外卖业务经营分析Agent的提示词工程、RAG效果验证和平台适配
• 参与知识图谱和分析框架建设，负责badcase归因，推动评测数据资产化
• 熟练掌握SQL，具备Python编程能力，能处理和分析大规模数据
• 了解LLM评估方法论（如BLEU、BERTScore、LLM-as-a-Judge），有基本认知
• 具备结构化思维和强Owner意识，能主动挖掘和解决问题
• 对AI技术有好奇心，学习能力强

申请策略

• 了解滴滴外卖业务的基本指标，面试时展现业务理解
• 可以准备一个Agent评测或数据分析的小demo，体现动手能力
• 突出SQL和Python项目经历，尤其是处理真实数据的案例
• 如有LLM或AI相关项目经验（如调用API、构建评测）一定要重点展示
• 强调结构化思维和主动解决问题能力，例如在项目中推动改进
• 提前学习LLM评估指标（BLEU、BERTScore、LLM-as-a-Judge）并尝试简单实验
• 了解RAG流程和常见知识库工具，熟悉Agent基本架构
• 练习SQL复杂查询和Python数据处理库（如pandas）

面试指南

• 对于评测类问题，可从指标设计、数据划分、结果分析三个层面回答
• 对于项目经历，使用STAR法则（情境-任务-行动-结果）组织，突出你的贡献和思考
• 对于LLM技术问题，先给出定义，再结合具体案例说明应用
• 什么是LLM-as-a-Judge？如何设计评测指标？
• 如何评估RAG系统的效果？
• 描述一个你处理过的最复杂的数据分析项目？
• 如何设计Prompt来提升LLM回答的准确性？
• 你如何看待Agent技术在业务分析中的应用前景？