明略科技
大模型测评经理(J15842)
大模型测评经理(J15842)
发布于 9 天前中层管理(经理/总监)
全职员工仅现场办公AI算法
AI算法
大模型
数据分析
机器学习
模型评估
测试标准
深度学习
跨部门协作
值不值得投
74综合评分
综合评分 74
大厂核心AI岗位、技术前沿、发展性好，WLB待确认
从薪资福利、成长发展、工作生活和使命价值四个维度综合评估，方便横向比较。
薪资怎么样
3.3万
比AI算法中位数低
发布情况
正常在招 · 9 天前发布
公司情况
这家公司招聘很活跃
20 个在招 · 其中AI算法 6 个
市场机会
选择适中
上海 · AI算法 · 46 个在招
职位详情
关于这个职位
负责大模型的性能评估与测试，制定测评标准及流程，确保模型的准确性与稳定性
通过设计对比实验分析结果并推动研发改进，同时撰写技术文档并跟踪前沿技术以优化产品竞争力
最低要求
本科及以上学历，计算机、人工智能、统计学等相关专业优先
年以上相关工作经验，有大模型测评或开发经验者优先
熟悉机器学习、深度学习算法及其应用，具备较强的数据分析能力
优秀的沟通协调能力和团队合作精神，能够有效推动跨部门合作
具有强烈的责任心和自驱力，能够在快速变化的环境中推动项目进展
工作职责
负责大模型的性能评估与测试，制定测评标准和流程，确保模型的准确性和稳定性
设计并实施大模型的对比实验，分析结果并提出优化建议
协调研发团队进行模型改进，推动技术创新和产品迭代
撰写测评报告和技术文档，确保团队成员对模型性能有清晰的理解
跟踪行业动态及前沿技术，提出创新性的测评方案以保持产品竞争力
AI 洞察
优缺点分析
优点
- 处于AI大模型风口，技术前沿性强
- 能接触核心算法团队，积累高价值行业经验
- 大模型评测标准尚在探索中，需不断跟进最新技术动态
- 适合对AI技术有热情、具备扎实算法基础且善于沟通的技术型人才
缺点 / 挑战
- 跨部门协调压力大
角色解读
- 可向AI质量保障专家、大模型架构师或AI技术管理方向发展
- 建立大模型的性能评估体系，包括制定测评标准和执行测试流程
- 深入理解机器学习/深度学习原理，具备复杂的数据分析与实验设计能力
申请策略
- 了解明略科技在AI领域的具体业务方向，展示如何将评测能力赋能其产品线
- 突出大模型相关的项目经验，特别是模型评估、基准测试（Benchmark）的具体成果
- 熟悉主流LLM评测框架（如C-Eval, MMLU等），提升自动化测试脚本编写能力
面试指南
- 使用STAR法则（情境、任务、行动、结果）描述项目经历，重点强调方法论的科学性和结果的量化指标
- 你如何设计一个大语言模型的综合评测体系？
- 请分享一个你主导的模型优化案例，你是如何通过数据发现问题的？
- 面对不同厂商的大模型，你会采用哪些维度进行对比分析？
- 复习Transformer架构细节，准备1-2个深入的模型调优或评测案例，了解当前AI行业的热点评测榜单
职位点评
薪资福利75
成长发展85
工作生活60
使命价值70
薪资福利
75中等
作为已上市大型企业，提供稳定的薪酬体系和完善的福利保障，薪资水平在上海市场具有竞争力。
薪资信号未披露（AI估算：2.5千–4.0万/月）
成长发展
85较高
职位涉及前沿的大模型技术，能提供持续学习新技术的机会，且在公司内部有明确的职业晋升空间。
技术前沿前沿/新兴技术
技术栈大模型、机器学习、深度学习、数据分析
业务类型profit_center
工作生活
60中等
未明确提及弹性工作制，但作为科技公司通常有一定的灵活性；需关注实际加班情况。
工作模式未明确
办公地点市区核心地段
加班情况未提及（无法判断）
使命价值
70中等
致力于提升大模型质量和安全性，对推动AI技术的可靠应用具有积极的社会意义。
行业发展高速增长赛道
社会影响正向社会影响力较高
创新程度积极采用新技术
明略科技 的其他在招职位
相似职位推荐
Reinforcement Learning Intern - 2027
英伟达 · 上海市
AI 估算 · 1.0–1.5万5 小时前发布
AI Infrastructure and Frameworks Intern, Cosmos Lab - 2027
英伟达 · 上海市
AI 估算 · 8.0千–1.5万5 小时前发布
Senior AI Video Architecture Engineer
英伟达 · 上海市
AI 估算 · 4.0–7.0万5 小时前发布
Agent 开发工程师-订单组
同程旅行 · 北京市
薪资 · 3.0–4.5万13 小时前发布
Agent评测工程师
美团 · 北京市
AI 估算 · 2.5–4.5万14 小时前发布
【实习】大模型评测实习生
美团 · 北京市
AI 估算 · 0.3–0.4千14 小时前发布
AI Agent 知识库方向技术专家
美团 · 上海市
AI 估算 · 4.0–7.0万14 小时前发布
Industrial Engineering ES
德科斯米尔 · 沈阳市
AI 估算 · 1.8–3.0万14 小时前发布
Watch Jobs