滴滴出行
资深数据采集工程师
资深数据采集工程师
发布于 3 小时前普通员工/个人贡献者
全职员工仅现场办公数据工程
数据工程
Ocr
Rpa
分布式架构
反爬策略
数据清洗
浏览器指纹
Ip代理池
爬虫开发
值不值得投
72综合评分
综合评分 72
技术挑战强、发展路径清晰的大厂核心数据岗，WLB一般但发展性动机匹配度高
从薪资福利、成长发展、工作生活和使命价值四个维度综合评估，方便横向比较。
薪资怎么样
4.3万
比数据工程中位数低
发布情况
新岗位 · 今天发布
公司情况
这家公司招聘很活跃
约 2320 个在招 · 其中数据工程 30 个
市场机会
选择面较广
北京 · 数据工程 · 约 170 个在招
职位详情
关于这个职位
本职位主要负责海外指定平台的数据抓取与RPA自动化开发，攻克高频反爬难点并结合OCR技术完成解析入库
需根据业务需求定制采集规则，保障数据完整获取
独立对接业务侧需求，协同完成数据清洗、校验与应用落地，持续跟踪优化采集技术方案
最低要求
年及以上真实数据采集一线经验，有过自动化采集、数据分析相关工作经历
熟悉各种反爬机制，并熟悉常见反检测策略，如IP代理池、浏览器指纹、User-Agent 伪装、Cookie管理等
具备良好的沟通能力和团队协作精神，能够与业务、技术、数据等团队高效配合
工作职责
负责海外指定平台数据抓取开发与维护，负责自动化工具与RPA开发，攻克高频反爬等难点，并结合OCR技术完成数据解析和入库
根据业务需求迭代爬虫程序，精准定制数据采集规则，完成增量、全量、定期抓取任务，保障数据采集的完整
独立对接业务侧数据采集需求，明确采集字段、数据口径和应用场景，协同技术团队完成数据获取、清洗、校验及应用落地
跟踪RPA等自动化采集技术及数据采集相关技术发展，不断优化采集方案和团队能力
优先资格
有大型APP数据采集项目经验者优先
有团队管理经验者优先
AI 洞察
优缺点分析
优点
- 平台资源完善，技术栈前沿且体系化
- 团队管理优先，提供明确的晋升通道
- 海外平台反爬策略频繁升级，需持续跟进对抗技术
- 业务需求多变，需快速响应与迭代
- 适合具备扎实爬虫底层原理与反爬实战经验，追求技术深度且能接受快节奏迭代的技术人员
缺点 / 挑战
- 接触海外核心业务数据，技术挑战性强（反爬/RPA/OCR）
- 数据合规风险较高，需平衡采集效率与法律边界
角色解读
- 可向高级爬虫专家、数据架构师或技术团队负责人方向发展
- 深耕海外数据合规与自动化采集领域，成为行业稀缺的技术骨干
- 负责海外平台的数据抓取与RPA自动化开发，解决高频反爬难题
- 定制数据采集规则，保障数据完整获取与入库
- 对接业务需求，协同完成数据清洗、校验与应用落地
- 精通爬虫架构与反爬对抗策略（IP代理、指纹伪装等）
- 掌握RPA工具与OCR识别技术
- 具备大型APP数据采集实战经验
- 良好的跨团队沟通与项目管理能力
申请策略
- 提前研究目标公司出海业务线及安全风控逻辑
- 准备1-2个高难度反爬破解的项目复盘，重点说明技术选型与踩坑经验
- 突出大型APP数据采集项目成果，量化采集规模与成功率
- 详细列出反爬对抗方案（如指纹绕过、动态渲染解析）
- 展示RPA与OCR结合落地的实际案例
- 深入学习主流反检测引擎（如Playwright/Puppeteer高级用法）
- 补充数据合规与隐私保护知识
- 提升自动化测试与CI/CD集成能力
面试指南
- 采用STAR法则（情境-任务-行动-结果）结构化回答
- 重点突出技术难点拆解、方案对比论证、性能指标优化及最终业务价值
- 强调合规意识与风险控制
- 请分享一个你攻克过的最复杂的反爬案例，你的技术路径是什么？
- 如何设计高并发、高可用的分布式爬虫系统？
- 在数据采集过程中如何确保数据合规与安全性？
- 复习分布式爬虫架构（Scrapy-Redis/Kafka）、反爬机制底层原理
- 准备数据清洗与质量校验的实际案例
职位点评
薪资福利78
成长发展82
工作生活55
使命价值65
薪资福利
78中等
薪资处于市场中上水平，结合背景企业与年终奖预期，整体薪酬竞争力较强。
薪资信号市场水准 (3.0千–5.5万/月)
成长发展
82较高
岗位聚焦海外数据采集与RPA前沿技术，技术挑战大且涉及多领域交叉，利于技能纵深拓展与管理能力提升。
技术前沿前沿/新兴技术
技术栈RPA、OCR、反爬策略、IP代理池、浏览器指纹
业务类型profit_center
工作生活
55较低
互联网节奏较快，海外业务对接可能涉及跨时区协作，WLB一般；办公模式未明确提及，默认现场办公。
工作模式未明确
办公地点市区核心地段
加班情况未提及（无法判断）
使命价值
65中等
支撑公司出海安全与业务决策，具有一定商业价值与社会影响力，但核心导向仍偏重商业数据获取。
行业发展稳定成熟行业
社会影响中性/一般
创新程度积极采用新技术
Watch Jobs