Data Engineer

À propos de l'entreprise

Rejoignez Scalian et participez à l’innovation en systèmes embarqués ! Depuis plus de 30 ans, Scalian accompagne les grands acteurs industriels grâce à son expertise en IT et OT. Avec plus de 6 000 spécialistes, nous intervenons sur des projets technologiques de pointe dans des secteurs tels que l’aéronautique, la défense, le ferroviaire, l’énergie et l’automobile.

À propos du poste

Dans le cadre du développement de nos activités en Belgique, nous recherchons un(e) Data Engineer pour rejoindre une équipe de développement multidisciplinaire et contribuer à des projets technologiques complexes dans un environnement industriel exigeant.

Missions principales :

• Conception et développement de pipelines de données : Concevoir, développer, déployer, valider et tester des pipelines et architectures de données répondant aux besoins des équipes d’ingénierie et d’analyse.
• Architecture et structuration des données : Définir et mettre en œuvre des architectures et structures de données performantes afin de garantir leur cohérence, leur scalabilité et leur fiabilité.
• Gestion des bases de données et Data Lakes : Mettre en place, maintenir et optimiser les bases de données, Data Lakes et solutions de stockage associées pour les données structurées et non structurées.
• Data Engineering & Machine Learning : Développer des pipelines permettant l’exécution d’algorithmes de Machine Learning et d’autres traitements avancés de données.
• Gestion des pipelines CI/CD : Développer et améliorer les processus d’intégration et de déploiement continus afin d’automatiser les tests et les déploiements, tout en améliorant la qualité du code et l’efficacité des développements.
• Collaboration multidisciplinaire : Travailler en étroite collaboration avec les développeurs logiciels, Data Scientists et ingénieurs afin de garantir l’adéquation des systèmes de données avec les exigences techniques et métiers.
• Amélioration continue : Contribuer à l’amélioration des pratiques de développement, des stratégies de test et des standards de Data Engineering.
• Support aux différents projets : Intervenir sur plusieurs projets simultanément et collaborer avec les équipes opérationnelles et de production afin de contribuer à l’amélioration des performances des systèmes développés.

Qualifications

• Diplôme de niveau Master en informatique, ingénierie ou domaine équivalent, idéalement avec une spécialisation en Data Engineering, Data Science ou domaine connexe.
• Expérience solide en Data Engineering et maîtrise de Python, SQL, Spark et Docker, notamment pour le traitement de données, l’automatisation et les applications liées à l’IA.
• Connaissance des outils et frameworks tels que Jenkins, Jupyter, Superset et Dagster.
• Bonne compréhension des bases de données, Data Lakes, Data Warehouses, pipelines CI/CD et pratiques de tests unitaires.
• Une expérience en Data Warehousing et Kubeflow constitue un atout.
• La connaissance des tests unitaires MATLAB est également appréciée.
• Intérêt marqué pour les solutions Open Source et On-Premise, ainsi que pour les nouvelles technologies et innovations dans le domaine de la Data.
• Capacité à travailler au sein d’une équipe multidisciplinaire et à communiquer efficacement avec des interlocuteurs techniques et non techniques.
• Rigueur, attention aux détails et forte exigence en matière de qualité, fiabilité et excellence technique.
• Des connaissances complémentaires en Software Engineering, Front-End Development, Data Analytics, C/C++, Git, DevOps ou Bitbucket constituent un plus.