【飞YOUNG实习生】AI测试工程师

优缺点分析

角色解读

• 从AI测试实习生成长为专业测试工程师，深入大模型评测领域
• 可向AI效果分析、质量保障或AI产品经理方向发展
• 积累大模型行业经验，未来可成为AI测试专家或技术主管
• 负责大模型和智能体产品的端到端评测，分析效果问题并推动闭环
• 构建AI产品效果度量标准，结合用户行为和竞品分析推动产品优化
• 开发效能提升方案，提高测试效率和覆盖性
• 参与需求分析和代码评审，从测试角度提出改进建议
• 掌握至少一种编程语言（Python/Java/C++），具备测试工具开发能力
• 了解常用算法评测指标，能构建端到端效果测试方案
• 业务理解能力强，能跟踪业界LLM和Agent相关产品及Benchmarks
• 良好的沟通协作和问题分析能力

申请策略

• 在简历或面试中表达对AI测试的热情和持续学习的态度
• 关注科大讯飞的AI产品线，了解其业务方向
• 突出编程项目经验，尤其是使用Python等语言开发的工具或测试脚本
• 强调对AI/大模型的了解，如使用过开源大模型或了解评测指标
• 展示问题分析和解决能力
• 如有参与开源项目或技术博客，也可提及
• 提前学习大模型评测的常用方法和基准（如MMLU、HumanEval等）
• 补充测试工具开发能力，如自动化测试框架

面试指南

• 对技术问题，先给出定义或概念，再结合具体例子说明
• 对项目经历问题，按照STAR法则：情境、任务、行动、结果
• 对开放性问题，表明自己的理解并提出思路
• 请谈谈你了解的大模型评测指标有哪些？如何评估一个智能体的效果？
• 你如何设计一个端到端测试方案？请举例说明
• 请描述一次你通过测试发现问题并推动解决的经历
• 你熟悉哪些编程语言？有没有开发过测试工具？
• 你对LLM Agent了解多少？了解哪些Benchmark？