大数据研发工程师

用微信扫描二维码

可分享职位给微信好友或朋友圈

平安好医生-技术及运营中心

城市: 深圳市 经验要求: 3年 招聘人数: 2人 24天前

岗位职责:

• 岗位定位
• 负责平安好医生大数据基础平台、数据研发平台、数据 API 平台、等核心数据基础设施建设，支撑公司医疗健康数据资产沉淀、经营分析、AI 应用、风控分析和数字化运营。
• 岗位职责
• 1.负责公司大数据基础架构平台建设，包括 Hadoop、Hive、Spark、Flink、Doris、Paimon 等相关技术体系。
• 2.负责离线计算、实时计算、湖仓一体、数据调度、任务治理、资源治理等平台能力研发。
• 3.负责数据 API 平台建设，为业务系统提供统一、稳定、可治理的数据服务能力。
• 4.负责用户画像、数据治理、数据资产等平台能力建设。
• 5.参与医疗健康数据资产建设，支持集团医疗数据库等核心数据资产沉淀。
• 6.负责大数据平台稳定性、作业效率和平台可用性优化。
• 7.需要具备超大规模实时、离线平台系统开发经验（数据规模PB、EB）

• 1.本科及以上学历，计算机、软件工程、数据科学等相关专业。
• 2.具备 3 年以上大数据平台、大数据开发、数据中台或数据基础架构研发经验。
• 3.熟悉 Hadoop 生态，理解 HDFS、YARN、Hive、Spark、MapReduce、HBase、Zookeeper 等核心组件。
• 4.熟悉 Flink、Kafka、Flink SQL、Spark Streaming 等实时计算技术，有实时数据链路建设经验优先。
• 5.熟悉数据仓库、数据湖、湖仓一体、数据建模、ETL/ELT、调度系统、元数据管理等相关技术。
• 6.熟悉 Java / Scala / Python / SQL 中至少两种语言，具备良好的工程研发能力。
• 7.熟悉 MySQL、PostgreSQL、ClickHouse、Doris、StarRocks、Elasticsearch、Redis 等常用存储或查询引擎。
• 8.理解数据治理体系，包括数据标准、指标体系、数据质量、数据安全、血缘分析、权限管理、资产目录等。
• 9.具备平台化、产品化思维，能够将数据研发过程中的共性问题沉淀为平台能力。

收藏职位