Data Engineer

Dołącz do zespołu, którego misją jest dostarczanie wysokiej jakości danych dla analityki oraz rozwój nowoczesnych kompetencji Analytics i AI.

Wspieramy pełny cykl życia danych w organizacji – od systemów źródłowych, poprzez integrację danych i Unified Data Platform (Data Lake), aż po data marty, modele semantyczne, rozwiązania Business Intelligence oraz produkty oparte na sztucznej inteligencji.

Wymagania

• kilkuletnie doświadczenie na stanowisku Data Engineer,
• praktyczne doświadczenie z:
• Databricks,
• Azure Data Factory,
• Azure SQL Database,
• Azure Key Vault,
• Azure Synapse Analytics,
• Informatica Intelligent Cloud Services (IICS),
• bardzo dobrą znajomość języków Python, PySpark oraz SQL,
• doświadczenie w projektowaniu i utrzymaniu procesów CI/CD oraz środowisk Azure DevOps,
• znajomość integracji API oraz architektury danych w środowisku enterprise,
• znajomość nowoczesnych metod modelowania danych,
• podstawową wiedzę z zakresu sztucznej inteligencji i uczenia maszynowego,
• doświadczenie w pracy w zespołach Agile/Scrum,
• rozwinięte umiejętności analityczne, rozwiązywania problemów oraz efektywnej współpracy z biznesem.

Mile widziane

• doświadczenie w projektach związanych z Data Lakehouse,
• udział w projektach Business Intelligence (Power BI, SAP BusinessObjects),
• doświadczenie w budowie rozwiązań AI i produktów danych (Data Products).

Zakres obowiązków

• projektowanie, budowę i utrzymanie procesów integracji danych z systemów źródłowych do Unified Data Platform (Data Lake),
• tworzenie i rozwój analitycznych struktur danych, takich jak data marty, modele semantyczne oraz universes, zapewniających łatwy dostęp do wiarygodnych danych,
• współpracę z interesariuszami biznesowymi w celu analizy wymagań i dostarczania rozwiązań Data Engineering,
• rozwój i utrzymanie procesów ETL/ELT z wykorzystaniem Azure Services, Databricks, Azure Synapse oraz Informatica Intelligent Cloud Services (IICS),
• implementację zaawansowanej logiki transformacji danych w Databricks i IICS,
• projektowanie nowoczesnych modeli danych zgodnie z najlepszymi praktykami Data Modeling,
• konfigurację oraz utrzymanie środowisk Azure DevOps, w tym CI/CD, wdrożeń, release management oraz hotfixów,
• tworzenie wysokiej jakości kodu w Pythonie, PySpark, SQL oraz skryptach automatyzujących,
• współpracę w metodyce Agile/Scrum oraz aktywne uczestnictwo w doskonaleniu procesów zespołowych,
• wsparcie rozwoju zaawansowanej analityki, Machine Learning oraz rozwiązań AI wykorzystujących dane przedsiębiorstwa.