阿里巴巴
晓天衡宇-大模型标注评测工程师-网络安全
晓天衡宇-大模型标注评测工程师-网络安全
发布于 不到 1 分钟前普通员工/个人贡献者
全职员工仅现场办公网络安全
网络安全
Ctf
Rlhf
Sft
团队管理
数据标注
渗透测试
漏洞挖掘
网络安全
质量管理
值不值得投
薪资怎么样
35K
比网络安全中位数高
发布情况
新岗位 · 今天发布
公司情况
这家公司招聘很活跃
约 1730 个在招
市场机会
选择不多
杭州 · 网络安全 · 3 个在招
职位详情
关于这个职位
该职位负责网络安全方向AI训练数据的标注与质检，与算法、产品团队协作，理解RM训练与rollout打分的数据需求，交付高质量数据
工作内容包括CTF解题、漏洞挖掘与利用、渗透测试等可验证环境出题场景的标注与质检流程设计，将writeup转化为可训练轨迹，从解题过程中提取milestone与pitfall，并对可验证环境（flag/shell判定）产出的数据做质量把关
统筹评测方案与数据生产方案，为rubric设计、verifier校验、轨迹打分制定可操作标准，定期开展pass与非pass双向抽检，迭代标注规范
构建并维护数据质量管理体系，对题目难度分层与轨迹根因归因负责，警惕题目可绕过、分数虚高等隐性风险
管理标注专家团队，统筹任务分配与产能
与算法、产品、领域专家协作，将个人判断力沉淀为团队方法论
最低要求
本科及以上学历，具备3年以上网络安全实战经验（CTF参赛、漏洞挖掘/利用、红队渗透、安全竞赛出题等其一），能独立判断解题轨迹与writeup的正确性与价值
熟悉源码/二进制/Kernel/浏览器/Web3中至少一个漏洞方向，或有靶场、CVE复现、逆向分析经验
理解可验证环境如何自动判定解题结果
对标注质量与reward signal分布敏感，能发现verifier漏洞、分数虚高等隐性问题
掌握Python，能做抽检统计与自动化脚本
具备团队管理与跨团队协作能力，思维严谨，每个判断都能指向具体证据
工作职责
负责网络安全方向AI训练数据（SFT/RL阶段）的标注与质检
与算法、产品团队协作，理解RM训练与rollout打分的数据诉求，交付满足研发需求的高质量数据
面向CTF解题、漏洞挖掘与利用、渗透测试等可验证环境出题场景设计标注与质检流程：将writeup转化为可训练轨迹、从解题过程中提取milestone与pitfall，并对可验证环境（flag/shell判定）产出的数据做质量把关
统筹本方向评测方案与数据生产方案，为rubric设计、verifier校验、轨迹打分制定可操作标准
定期开展pass与非pass双向抽检，迭代标注规范
构建并维护数据质量管理体系，对题目难度分层与轨迹根因归因负责，警惕题目可绕过、分数虚高等隐性风险
管理标注专家团队，统筹任务分配与产能
与算法、产品、领域专家协作，把个人判断力沉淀为团队方法论
AI 洞察
优缺点分析
优点
暂无明确优点
缺点 / 挑战
暂无明显挑战项
角色解读
- 负责网络安全方向AI训练数据（SFT/RLHF阶段）的标注与质检，与算法、产品团队协作，理解RM训练与rollout打分的数据诉求，交付满足研发需求的高质量数据
- 针对CTF解题、漏洞挖掘与利用、渗透测试等可验证测试环境，设计标注与质检流程，将writeup转化为可训练轨迹，从解题过程提取milestone与pitfall，并对可验证环境（flag/shell判定）产出的数据做质量把关
- 统筹评测方案与数据生产方案，为rubric设计、verifier校验、轨迹打分制定可操作标准
- 定期开展pass与非pass双向抽检，迭代标注规范
- 构建并维护数据质量管理体系，对题目难度分层与轨迹根因归因负责，警惕题目可绕过、分数虚高等隐性风险
- 管理标注专家团队，统筹任务分配与产能
- 与算法、产品、领域专家协作，将个人判断力沉淀为团队方法论
申请策略
暂无内容
面试指南
暂无内容
Watch Jobs