学历专业要求:专科及以上学历,专业不限
经验要求:具有3-5年相关工作经验优先
技术要求:
(1)熟练掌握至少一种流处理框架(如Apache Flink、Apache Kafka Streams、Storm等)
(2)深入理解流处理原理,包括数据流的定义、处理逻辑、状态管理等
(3)熟悉流处理与批处理的差异和联系,能够根据实际业务需求选择合适的处理技术
(4)精通SQL和至少一种编程语言(如Java、Scala、Python等),能够编写高效的数据处理逻辑
(5)熟悉数据清洗、转换、聚合等常见的数据处理操作
(6)具备处理大规模网络流量数据的能力,了解数据压缩、分区等优化技术
(7)有处理运营商网络数据相关项目的经验优先,如流量分析、用户行为分析、网络性能优化等
(8)熟悉Linux操作系统和常见的大数据技术栈(如Hadoop、Spark等)
(9)能够独立搭建和配置流处理平台,包括硬件选型、网络规划、软件安装等
(10)具备对流处理平台进行性能调优和故障排查的能力