闻泰科技
大数据软件工程师(J10802)
大数据软件工程师(J10802)
发布于 大约 7 小时前普通员工/个人贡献者
上海市
中级经验
全职员工
仅现场办公
本科
软件工程
Mapreduce
多线程
AI 估算 · 15k–25k
上海大数据岗位，2年经验，结合行业水平，薪资具有竞争力
职位详情
关于这个职位
这是一个大数据软件工程师岗位，负责参与需求分析、系统架构设计以及大数据处理平台的开发，涉及数据抽取、离线计算和任务调度
你将使用Java和Hadoop生态技术，处理海量数据并为业务提供数据支持
适合有2年以上Java经验、1年以上大数据开发经验的技术人员
最低要求
计算机相关专业，全日制本科及以上学历
年以上Java开发经验，1年以上大数据相关项目开发经验
精通Java多线程编程，熟练使用Linux操作系统，熟练掌握Git、SVN、Maven、Jira等开发管理工具
熟悉Linux和Windows等操作系统安装、配置、调试
精通Hadoop生态圈技术，有丰富的MapReduce/HBase开发经验
具备较强的逻辑思维能力、学习创新能力、数据分析能力
良好的沟通技巧和团队合作意识
工作职责
参与需求分析过程，共同讨论确定产品功能
参与系统架构讨论，参与核心模块和类的设计与开发
参与业务数据抽取、加载、转换脚本开发及监控及任务调度系统开发
开展用户行为分析相关的离线计算工作
负责编写产品用户文档、需求文档、概要设计、详细设计、功能设计说明书等各种技术文档
应努力学习、积极进取，不断学习新的云计算和大数据的相关技术，不断提高自我
优先资格
熟悉Storm、Spark等大数据相关技术者优先
AI 洞察
优缺点分析
优点
- 技术积累扎实：接触Hadoop生态全栈技术，提升大数据处理核心能力
- 行业前景广阔：大数据在智能制造、物联网等领域持续需求旺盛
- 公司平台稳定：闻泰科技作为ODM龙头企业，提供稳定的工作环境和项目资源
- 技术更新快：大数据技术快速演进，需要持续学习新工具和框架
- 适合有Java基础且希望深耕大数据技术栈的工程师，尤其是对Hadoop生态有热情、善于逻辑分析和团队协作的求职者
缺点 / 挑战
- 工作强度可能较高：涉及生产环境监控和任务调度，可能需要处理突发问题
角色解读
- 技术深耕：向大数据架构师方向成长，深入掌握Spark、Flink等流式计算框架
- 业务拓展：转向数据产品经理或数据分析专家，结合业务理解推动数据驱动决策
- 管理方向：积累项目经验后，可晋升为技术小组长或项目经理，带领小团队
- 参与大数据平台的需求分析和系统架构设计，确保技术方案满足业务需求
- 负责数据抽取、加载、转换（ETL）脚本开发及任务调度系统的构建与维护
- 进行用户行为分析相关的离线计算，处理海量数据并输出分析结果
- 编写各类技术文档，包括需求文档、概要设计和用户手册等
- 精通Java多线程编程和Linux操作系统，熟练使用Git、Maven等开发工具
- 深入掌握Hadoop生态技术，特别是MapReduce和HBase的实战经验
- 具备较强的逻辑思维和数据分析能力，能独立解决问题
- 良好的沟通能力和团队协作意识，能够参与跨部门协作
申请策略
- 在简历开头明确标注“2年Java+1年大数据开发经验”，快速匹配任职要求
- 面试前准备一个完整的ETL或离线计算项目描述，包括架构、技术和难点
- 突出Java多线程和高并发项目经验，尤其是使用Hadoop/HBase处理大规模数据集的实际案例
- 强调Linux系统操作和工具链（Git、Maven、Jira）的熟练度，可列出具体项目
- 展示数据分析和逻辑思维成果，比如通过MapReduce优化数据处理效率的实例
- 如果有Storm或Spark相关经验，务必单独列出，作为优先资质的加分项
- 如果熟悉Hadoop但Spark/Storm较弱，建议快速学习Spark核心概念并完成一个小项目
- 补充数据仓库和ETL相关知识，了解常用调度工具如Azkaban或Oozie
面试指南
- 对于项目经验问题，采用STAR原则（情境、任务、行动、结果），突出技术难点和你的贡献
- 对于技术原理问题，先给出核心概念，再结合具体场景说明应用，最后提优化方案
- 请描述一个你使用MapReduce或HBase处理大数据的项目，包括挑战和解决方案
- Java多线程中，如何保证线程安全？请举例说明
- Hadoop集群中，如果数据倾斜了，你会如何调优？
- 谈谈你对Spark与MapReduce区别的理解，以及在什么场景下选择Spark？
- Linux系统下，如何排查Java应用内存泄漏问题？
- 复习Java并发编程（synchronized、Lock、线程池）和Linux常用命令
职位点评
65
综合评分
上海大数据岗，主流技术栈，薪资合理，发展性较好但WLB一般。
从薪资福利、成长空间、工作节奏和岗位方向综合评估，方便横向比较。
更适合这类人
该职位最适合注重技术成长和技能积累的求职者，对WLB要求不高且能接受现场办公。
表现最好
成长发展
相对薄弱
工作生活
薪资福利65
成长发展80
工作生活50
使命价值55
薪资福利
65中等
薪资处于上海市场中等水平，公司提供稳定薪资和福利，但JD未明确具体薪资和福利，信号不足。
薪资信号未披露（AI估算：15K-25K/月）
成长发展
80较高
技术要求扎实，涉及Hadoop生态核心技术，有明确学习成长期望（第6条职责），但未提及晋升通道。
技术前沿主流现代技术
技术栈Java、Hadoop、MapReduce、HBase、Storm、Spark
成长机会努力学习、积极进取，不断学习新的云计算和大数据的相关技术
业务类型ambiguous
工作生活
50较低
要求仅现场办公，未提及弹性工作或远程，上海通勤压力较大，JD无WLB相关描述。
工作模式仅现场办公
办公地点未明确
加班情况未提及（无法判断）
使命价值
55较低
大数据技术岗位有较好的行业前景，但JD未体现社会使命或创新导向，属于常规技术岗。
行业发展稳定成熟行业
社会影响中性/一般
创新程度积极采用新技术
闻泰科技 的其他在招职位
相似职位推荐
Watch Jobs