Beam 评测项目负责人
🤖 AI 估测：¥35K-60K
发布时间：26 天前
ℹ️关于这个职位
作为美团Beam评测项目负责人，你将负责构建AI应用端到端的评测体系，通过行业对标、工具平台建设和用户反馈闭环，确保AI产品的质量与体验
这是一个连接用户、技术与产品迭代的核心枢纽岗位，需要你具备扎实的评测方法论、数据洞察力和跨部门推动能力
✓工作职责
评测体系构建： 负责建立 AI 应用端到端的评测指标体系，涵盖模型基础能力、业务场景适配度、交互体验及性能指标
行业深度拆解： 定期产出行业其他产品与自有产品的对比评测报告（Benchmarking），通过定量数据与定性分析，识别产品在行业中的定位及差距
工具与平台驱动： 提出评测工具的需求原型，推动评测自动化平台的建设（如：自动化标注工具、AI-Judge 评估流程），提升评测效率
用户体验闭环： 监控真实用户的产品使用反馈，建立“用户反馈-评测诊断-产研迭代”的闭环机制，将评测洞察转化为具体的产品优化建议
众包与质量管理： 负责大规模标注人员/外部评测团队的管理，制定标注准则、质检流程及纠偏机制，确保评测数据的客观性与权威性
⭐最低要求
专业背景： 计算机、统计学、数据科学或心理学等相关专业本科及以上学历，3年以上 AI 相关行业经验
评测方法论： 熟悉主流大模型的评测框架，对如何衡量 AI 产品的“好用、易用、安全”有深厚的理论基础和实操经验
数据洞察力： 能够从海量的 Case 中抽丝剥茧，总结出模型幻觉、逻辑失效等底层问题的共性，并给出改进方向
沟通与推动力： 具备极强的跨部门协作能力，能通过数据说服产研团队进行策略调整
项目管理： 具备管理大型标注项目或外包团队的经验，熟悉 Sourcing、QA 以及标注平台的使用