明略科技
大模型测评经理(J15848)
大模型测评经理(J15848)
发布于 9 天前中层管理(经理/总监)
全职员工仅现场办公AI算法
AI算法
大模型
技术文档
数据分析
机器学习
模型测评
深度学习
算法评估
值不值得投
78综合评分
综合评分 78
大厂核心AI技术管理岗，前沿技术驱动，成长空间大，侧重专业深度与跨部门协同
从薪资福利、成长发展、工作生活和使命价值四个维度综合评估，方便横向比较。
薪资怎么样
3.3万
比AI算法中位数低
发布情况
正常在招 · 9 天前发布
公司情况
这家公司招聘很活跃
20 个在招 · 其中AI算法 6 个
市场机会
选择适中
北京 · AI算法 · 50 个在招
职位详情
关于这个职位
负责大模型的性能评估与测试，制定测评标准和流程，确保模型的准确性和稳定性
通过设计对比实验和分析结果，协调研发团队推动模型改进与技术迭代，同时撰写技术文档并跟踪前沿动态以保持产品竞争力
最低要求
本科及以上学历，计算机、人工智能、统计学等相关专业优先
年以上相关工作经验，有大模型测评或开发经验者优先
熟悉机器学习、深度学习算法及其应用，具备较强的数据分析能力
优秀的沟通协调能力和团队合作精神，能够有效推动跨部门合作
具有强烈的责任心和自驱力，能够在快速变化的环境中推动项目进展
工作职责
负责大模型的性能评估与测试，制定测评标准和流程，确保模型的准确性和稳定性
设计并实施大模型的对比实验，分析结果并提出优化建议
协调研发团队进行模型改进，推动技术创新和产品迭代
撰写测评报告和技术文档，确保团队成员对模型性能有清晰的理解
跟踪行业动态及前沿技术，提出创新性的测评方案以保持产品竞争力
AI 洞察
优缺点分析
优点
- 处于AI大模型风口，技术前沿性强，职业发展空间广阔
- 上市公司平台稳定，资源支持充足
- 大模型技术迭代极快，需持续学习最新评测方法与工具
- 跨部门协调工作量大，对沟通推动能力要求高
- 适合对AI技术有浓厚兴趣，具备较强逻辑分析能力与跨团队协作经验的资深技术人员
缺点 / 挑战
暂无明显挑战项
角色解读
- 可向AI质量保障负责人、算法架构师或AI产品经理方向发展，成为大模型落地应用的关键把关人
- 构建大模型评测体系，制定标准化的测试流程和指标，确保模型输出的准确性与安全性
- 深入理解机器学习与深度学习原理，具备扎实的数据分析与实验设计能力，能熟练处理大规模数据
申请策略
- 准备具体的模型评测案例，展示如何通过数据分析发现模型缺陷并推动研发改进的过程
- 突出大模型相关的项目经验，特别是评测体系搭建、基准测试（Benchmark）设计及效果优化的具体案例
- 熟悉主流LLM评测框架（如C-Eval, MMLU等），提升自动化测试脚本编写能力，加强行业前沿论文阅读
面试指南
- 采用STAR法则（情境、任务、行动、结果）描述项目经历，重点突出方法论的创新性、数据的严谨性以及最终带来的业务价值
- 你如何设计一个大语言模型的综合评测体系？
- 面对多模态大模型，你认为哪些维度是评测的关键？
- 当模型测试结果不理想时，你如何定位问题并推动研发解决？
- 请分享一个你主导的模型优化或评测改进的成功案例
- 复习Transformer架构基础，了解当前主流大模型评测榜单及局限性，准备1-2个深度技术案例以备深挖
职位点评
薪资福利80
成长发展90
工作生活60
使命价值75
薪资福利
80较高
作为已上市大型企业的核心技术研发管理岗，薪资水平通常高于市场平均，且福利体系完善，稳定性较高。
薪资信号未披露（AI估算：2.5千–4.0万/月）
成长发展
90较高
职位直接涉及最前沿的大模型技术，需要不断跟踪行业动态，技术成长空间巨大，且具备向更高阶技术管理发展的潜力。
技术前沿前沿/新兴技术
技术栈大模型、机器学习、深度学习、数据分析
成长机会推动技术创新、跟踪行业动态及前沿技术
业务类型profit_center
工作生活
60中等
JD未明确提及弹性工作制或WLB相关福利，但作为研发管理类岗位，相比纯执行岗可能有一定的自主性，不过高强度竞争环境可能带来压力。
工作模式未明确
办公地点科技园/产业园
加班情况未提及（无法判断）
使命价值
75中等
致力于确保AI模型的准确性与稳定性，推动技术创新，对于追求技术落地和社会影响力的求职者具有较高的意义感。
行业发展高速增长赛道
社会影响正向社会影响力较高
使命信号推动技术创新和产品迭代、保持产品竞争力
创新程度积极采用新技术
明略科技 的其他在招职位
相似职位推荐
Reinforcement Learning Intern - 2027
英伟达 · 上海市
AI 估算 · 1.0–1.5万5 小时前发布
AI Infrastructure and Frameworks Intern, Cosmos Lab - 2027
英伟达 · 上海市
AI 估算 · 8.0千–1.5万5 小时前发布
Senior AI Video Architecture Engineer
英伟达 · 上海市
AI 估算 · 4.0–7.0万5 小时前发布
Agent 开发工程师-订单组
同程旅行 · 北京市
薪资 · 3.0–4.5万13 小时前发布
Agent评测工程师
美团 · 北京市
AI 估算 · 2.5–4.5万14 小时前发布
【实习】大模型评测实习生
美团 · 北京市
AI 估算 · 0.3–0.4千14 小时前发布
AI Agent 知识库方向技术专家
美团 · 上海市
AI 估算 · 4.0–7.0万14 小时前发布
Industrial Engineering ES
德科斯米尔 · 沈阳市
AI 估算 · 1.8–3.0万14 小时前发布
Watch Jobs