基本要求 - 本科及以上学历,计算机相关专业,3年及以上大数据平台研发相关工作经验
- 具备扎实的Java开发语言基础,熟悉分布式系统设计原理和大数据处理流程
- 具备良好的编码习惯和文档编写能力,拥有较强的问题分析与解决能力
- 具备优秀的团队协作精神、沟通能力和抗压能力,能积极应对项目中的各类挑战
2. 核心技术要求 - 熟练掌握大数据平台产品层开发技术,有过大数据平台核心模块(如数据集成、离线数据开发、实数数据开发、数据服务等)的开发经验
- 熟悉底层大数据组件,包括但不限于HIVE(数据仓库构建、SQL优化)、SPARK/Flink(批处理/流处理开发、性能调优)、ES(索引设计、查询优化、集群运维)等,具备相关组件的集成与调优实战经验
- 熟悉分布式存储与计算框架,如HDFS、YARN等,理解其核心工作机制
- 掌握常用的数据库技术(MySQL等),具备库表结构与SQL调优能力
熟悉Kafka消息队列
- 了解微服务架构设计理念,具备Spring/Dubbo等微服务框架开发经验