大数据存储产品研发工程师/架构师-基础设施
🤖 AI 估测：¥40K-70K
发布时间：17 天前
ℹ️关于这个职位
这是一个专注于大数据存储基础设施研发的高级技术岗位
你将负责构建和优化字节跳动内部及云上大数据存储产品（如HDFS、CFS/EIC、DMS）的统一管控平台、核心数据流动能力以及深度数据洞察体系
工作涉及从底层系统研发到上层运营管理的全链路，需要与产品、SRE等多个团队紧密协作，以提升系统的可靠性、效率和资源利用率
✓工作职责
统一管控服务研发：负责大数据存储产品HDFS、缓存产品CFS/EIC、数据管理产品DMS的产品管控研发与交付
面向内部运维运营及云上多租户的场景，构建和完善统一的租户面与运维面管控能力
核心数据流动能力建设：建设和优化通用的数据流动能力，包括但不限于数据传输、数据沉降、数据预热、副本管理、副本迁移、数据均衡等核心数据流动能力的开发和建设
深度数据洞察体系构建：负责数据洞察相关能力的建设，包括大数据存储元数据、性能、容量、网络等多维度数据的采集、ETL处理及数据仓库建设
支持从客户端、集群、目录到文件级别的精细化统计与分析，驱动产品决策与资源优化
横向运营管理平台化：参与横向运营管理平台的建设与协作，覆盖需求预算、资源规划、成本优化（如提升资源利用率与售卖率）等方向，与产品经理、SRE、及其他研发团队紧密协作，提升整体运营效率
⭐最低要求
具备扎实的分布式系统或大数据存储方向的工程经验，对HDFS及其生态有深入理解或实践，熟悉大数据技术生态的优先考虑，如Alluxio、JuiceFS、Hadoop等
熟练掌握Golang/Java/Python中至少一种语言，具备优秀的工程实践能力
熟悉Linux系统，对网络与IO模型有深刻理解，具备Kubernetes（K8s）相关实践经验的优先考虑
具备强烈的责任心和负责人意识，对系统可靠性与版本迭代质量有高标准要求
具备优秀的跨团队沟通与协作能力，能与SRE、PD、前端、测试等角色高效配合，共同推进项目交付
👍优先资格
熟悉大数据技术生态，如Alluxio、JuiceFS、Hadoop等
具备Kubernetes（K8s）相关实践经验