Engenheiro de Dados SR - cloud GCP

A DOJO/FCamara está em busca de um(a) Engenheiro(a) de Dados Pleno/Sênior para atuar em projetos de Data & AI, com foco na construção, sustentação e evolução de pipelines de dados em ambiente cloud, contribuindo para soluções escaláveis, eficientes e alinhadas às necessidades do negócio.

Responsabilidades e atribuições

RESPONSABILIDADES E ATRIBUIÇÕES

Desenvolver, manter e otimizar pipelines de dados escaláveis em ambiente cloud;

Trabalhar com processamento distribuído de dados utilizando Apache Beam;

Orquestrar workflows e pipelines de dados utilizando Apache Airflow;

Desenvolver soluções em Python seguindo boas práticas de engenharia de software;

Atuar em ambientes Google Cloud Platform (GCP), utilizando serviços voltados para dados e analytics;

Criar e manter pipelines de deploy utilizando práticas de CI/CD;

Desenvolver e gerenciar configurações e automações utilizando YAML/YML;

Utilizar Docker para conteinerização de aplicações e serviços;

Desenvolver, testar e documentar modelos de transformação de dados com dbt;

Construir e otimizar soluções utilizando BigQuery para armazenamento e processamento analítico;

Colaborar com times de engenharia, analytics e negócio para garantir qualidade, confiabilidade e performance das soluções;

Apoiar decisões técnicas relacionadas à arquitetura, performance, observabilidade e governança de dados.

Requisitos e qualificações

REQUISITOS E QUALIFICAÇÕES

Inglês avançado é requisito eliminatório, devido à participação em reuniões, comunicação com stakeholders e documentação técnica em inglês;

Experiência com Google Cloud Platform (GCP);

Vivência com serviços como BigQuery, Cloud Storage, Cloud Composer e/ou Dataflow;

Conhecimento sólido em Python;

Experiência com Apache Beam;

Experiência com Apache Airflow;

Vivência com práticas de CI/CD;

Experiência com YAML/YML;

Conhecimento em Docker;

Experiência com dbt para transformação e modelagem de dados;

Familiaridade com versionamento de código, testes, documentação e boas práticas de desenvolvimento.

DIFERENCIAIS: Experiência em projetos de consultoria;

Conhecimento em arquitetura Lakehouse, Data Lake ou Data Warehouse;

Experiência com ferramentas do ecossistema GCP, como BigQuery, Dataflow, Dataproc, Cloud Composer e Looker;

Conhecimento em observabilidade, monitoramento e qualidade de dados;

Experiência com ambientes produtivos críticos e pipelines de alta volumetria;

Certificações Google Cloud relacionadas a Data Engineering.

Informações adicionais