道富公司
Software Engineering & Development, Officer
Software Engineering & Development, Officer
发布于 6 个月前普通员工/个人贡献者
杭州市
中级经验
全职员工
仅现场办公
本科
软件工程
云原生
分布式系统
数据安全
AI 估算 · 18k–30k
外资银行软件研发岗，需提供架构指导，技术深度要求高，薪资在杭州具有竞争力。
职位详情
关于这个职位
这是一个面向资深开发者的软件工程岗位，你将作为应用开发负责人，加入道富公司的数据智能团队
核心工作是使用Apache Spark、Databricks等大数据技术，设计、构建和维护一个稳健、可扩展的数据处理平台及端到端解决方案
你将深度参与软件开发生命周期的各个阶段，并有机会利用AI和机器学习工具推动平台创新
最低要求
BS/MS in Computer Science or equivalent field
years of software engineering experience
Strong programming skills in Java, Python, Scala, SQL, UNIX and Shell scripting
Deep understanding of distributed system concepts like concurrency, fault tolerance, and consistency models.
Deep understanding of cloud-native and system integration design patterns, with the ability to apply patterns to build scalable, maintainable, and secure cloud applications
In-depth knowledge of event-driven architecture and real-time data streaming such as Kafka, AWS SQS, Kinesis,
Solid understanding of data security principles including encryption, key management, and secure design principles
Strong understanding of application monitoring, observability, and alerting practices to ensure system reliability, performance, and rapid incident response
Strong experience with batch and real-time data processing, focusing on data quality.
Strong experience with OLAP and OLTP Databases and storage solutions
Strong experience with Apache Spark, Databricks
Hands-on experience with MATLAB and MCR
Hands-on experience with system and application performance optimization
Hands-on experience with CICD and Dev. Ops.
工作职责
Provide architectural direction across development teams and lead technical design reviews.
Participate in strategic planning, technical roadmap development, and system architecture reviews.
Ensure all technical solutions exhibit higher level of efficiency, performance, security, scalability, and reliability
Collaborate with cross-functional teams to define technical requirements and ensure successful project execution.
Leverage AI and machine learning tools to drive platform innovation
Stay current with industry best practices; evaluate emerging tools for strategic benefit.
AI 洞察
优缺点分析
优点
- 技术栈前沿：能深度接触并实践Apache Spark、Databricks、云原生、AI/ML等当前热门且高价值的技术
- 职业发展清晰：公司提供包容性的发展机会和灵活的工作生活支持，有助于长期职业成长与平衡
- 金融行业合规性：在数据处理中需严格遵守金融行业的数据安全和合规要求，增加了技术实现的复杂性和严谨性要求
- 适合拥有3-5年扎实后端或大数据开发经验，对构建企业级数据平台充满热情，具备强烈自驱力、优秀解决问题能力和良好沟通协作精神的资深软件工程师
缺点 / 挑战
- 平台价值高：在金融行业头部公司构建核心数据处理平台，项目影响力和技术挑战性大，对个人履历加分显著
- 技术要求全面且深入：不仅需要精通多种编程语言和大数据框架，还需对系统架构、安全、运维有深刻理解，学习压力大
- 责任与期望高：作为开发负责人，需独立负责项目全周期，并确保解决方案的高效、安全与可靠，工作强度和压力并存
角色解读
- 技术路径：可以从资深工程师成长为架构师，专注于更复杂、更大规模的数据平台和系统架构设计
- 业务路径：深入理解金融数据业务后，可向技术管理或数据产品方向拓展，负责技术战略或产品规划
- 行业路径：在金融科技领域积累的扎实经验，为未来在更广泛的科技或金融行业担任高级技术专家奠定基础
- 作为应用开发负责人，主导基于Apache Spark和Databricks的大数据处理平台的设计、构建与维护工作
- 深度参与从需求分析、技术设计到部署支持的全软件开发生命周期，并负责跨团队的技术架构指导和评审
- 利用AI和机器学习工具推动平台技术创新，并持续评估行业最佳实践和新兴工具的战略价值
- 扎实的Java、Python、Scala编程能力，以及对分布式系统（并发、容错、一致性）和云原生设计模式的深刻理解
- 丰富的Apache Spark、Databricks实战经验，以及Kafka、AWS SQS等实时数据流处理技术的深入知识
- 强大的数据安全（加密、密钥管理）、系统监控、性能优化以及CI/CD和DevOps的实践经验
申请策略
- 申请前仔细研究道富公司的业务，特别是其数据智能部门可能服务的金融业务场景，在面试中展现你的业务理解与技术结合能力
- 关注公司文化中强调的‘包容性发展’和‘员工价值’，在沟通中可适当表达对这类企业文化的认同和期待
- 重点突出使用Apache Spark、Databricks构建和优化大规模数据处理平台的具体项目经验，量化性能提升或业务影响
- 详细描述在云原生架构设计、实时数据流处理（如Kafka）、系统性能调优以及CI/CD流水线搭建方面的实战成果
- 展示在跨团队协作中提供技术架构指导、主导技术评审以及确保项目成功交付的领导力和沟通能力案例
- 如果对金融行业特定数据模型或合规要求不熟悉，可提前学习相关基础知识，了解行业数据特点
- 加强对事件驱动架构、数据安全最佳实践（如加密、密钥管理）以及现代可观测性工具（如Prometheus, Grafana）的理解和应用
- 准备1-2个能体现你利用技术解决复杂业务问题、并带来显著价值的深度项目案例，用于面试深度讨论
面试指南
- 对于技术问题，采用‘情境-任务-行动-结果’(STAR)原则来组织答案，清晰阐述背景、你的角色、采取的具体技术行动以及可量化的最终成果
- 对于架构和设计类问题，先阐述核心原则（如 scalability, reliability, security），再结合具体技术栈（如微服务、容器化、特定云服务）展开分层设计思路
- 对于行为和协作类问题，重点展示你的问题分析过程、沟通协调方法以及如何推动事情向前发展，而不仅仅是陈述事实
- 请详细描述一个你使用Apache Spark处理大规模数据并遇到性能瓶颈的案例，你是如何分析和优化它的？
- 在设计一个高可用、可扩展的云原生数据平台时，你会考虑哪些关键架构原则和技术选型？
- 你如何确保数据处理平台的数据安全和合规性？请谈谈你在加密、访问控制等方面的实践经验
- 请举例说明你如何领导或深度参与一个技术方案的设计评审，并推动跨团队达成共识
- 你如何看待AI/ML工具在数据平台中的应用？是否有过相关的实践或探索？
职位点评
Watch Jobs