Engenheiro de Dados SR - cloud Azure

A FCamara está em busca de um(a) Engenheiro(a) de Dados Pleno/Sênior para atuar em projetos de Data & AI, com foco na construção, sustentação e evolução de pipelines de dados em ambiente cloud, contribuindo para soluções escaláveis, eficientes e alinhadas às necessidades do negócio.

Responsabilidades e atribuições

RESPONSABILIDADES E ATRIBUIÇÕES

Desenvolver, manter e otimizar pipelines de dados escaláveis;

Trabalhar com processamento distribuído utilizando Apache Spark;

Orquestrar workflows e rotinas de dados com Apache Airflow;

Desenvolver soluções em Python seguindo boas práticas de engenharia;

Atuar em ambientes cloud, especialmente Microsoft Azure;

Criar e manter pipelines de deploy utilizando práticas de CI/CD;

Trabalhar com arquivos de configuração e automação em YAML/YML;

Utilizar Docker para conteinerização de aplicações e serviços;

Desenvolver, testar e documentar modelos de transformação de dados com dbt;

Colaborar com times de engenharia, analytics e negócio para garantir qualidade, confiabilidade e performance das soluções;

Apoiar decisões técnicas relacionadas à arquitetura, performance, observabilidade e governança de dados.

Requisitos e qualificações

REQUISITOS E QUALIFICAÇÕES

Inglês avançado é requisito eliminatório, pois exige participação em reuniões, leitura de documentação técnica, comunicação com stakeholders e registro de decisões em inglês;

Experiência com Azure e serviços relacionados a dados;

Conhecimento sólido em Python;

Experiência com Apache Spark;

Experiência com Apache Airflow;

Vivência com práticas de CI/CD;

Experiência com desenvolvimento e configuração usando YAML/YML;

Conhecimento em Docker;

Experiência com dbt para transformação e modelagem de dados;

Familiaridade com versionamento de código, testes, documentação e boas práticas de desenvolvimento.

DIFERENCIAIS: Experiência em projetos de consultoria.

Conhecimento em arquitetura lakehouse, data lake ou data warehouse.

Experiência com Databricks, Azure Data Factory, Synapse ou Fabric.

Conhecimento em observabilidade, monitoramento e qualidade de dados.

Experiência com ambientes produtivos críticos e pipelines de alta volumetria.

Informações adicionais