Senior Data Engineer

职位来源于智联招聘。

工作职责：

• 参与整个系统开发生命周期（SDLC），以确保项目成功交付。
• 进行需求研究、分析、设计、文档编制，并与用户、技术团队和运营团队进行协调。
• 分析和整理来自各种数据源的原始数据。
• 深入了解相关的数据工程最佳实践。
• 使用第三范式（3NF）和维度建模技术为数据仓库和数据集市设计数据模型。
• 设计和构建数据 API 和数据虚拟化，以供用户和使用中的应用程序访问数据。
• 设计、构建和维护 ETL 批处理和流数据管道。

设计和构建数据平台（数据仓库、数据集市、数据湖）。

• 支持用户验收测试和系统实施。
• 准备系统和操作文档。
• 提供持续的用户和应用程序支持。
• 指导解决方案开发人员。

职位要求：

• 拥有计算机科学、信息技术或相关学科的学位。
• 至少有 4 年作为数据工程师的经验，在构建批处理 ETL 和实时流数据管道、构建数据仓库、数据湖和分析平台方面有丰富经验。
• 在数据仓库和数据应用的业务支持方面知识渊博且经验丰富。
• 熟练掌握编程语言：SQL、Python、PySpark、Java、JavaScript。
• 有数据库方面的经验：Oracle - PL/SQL、Teradata 或类似数据库。
• 有 OpenShift 方面的经验 - Restful API、Apache Spark、Hadoop、Perl、Java、SAS。
• 有在 AWS 云数据平台上的工作经验：S3、Redshift、EMR、Glue、MWAA、Lambda、DMS、Transfer Family、DevOps。
• 有 ETL 工具 Informatica 的经验者优先。
• 具备有效的英语和中文（粤语）口头和书面沟通能力。
• 良好的分析、人际交往和问题解决能力。
• 良好的团队合作精神、积极的态度、创新能力、自我主动性强、渴望学习并与其他团队成员分享、勤奋努力、能够在压力下工作并独立工作。
• 资格和经验较少的候选人将被考虑为数据工程师开发人员。

以担保或任何理由索要财物，扣押证照，均涉嫌违法。