Back to search
Leega Consultoria Gupy · Posted 2mo ago

Engenheiro de Dados Sênior

Brasil Remote

remote Brasil Gupy
Continue to application Add your email once, then Caio opens the original posting.

Indexed description

A Leega é uma empresa focada no atendimento eficiente e inovador em seus clientes.

Isso não poderia ser diferente com o nosso principal combustível: as pessoas!

Nossa cultura é inspiradora e nossos valores estão presentes no dia a dia: ética e transparência, excelência de qualidade, trabalho em equipe, responsabilidade econômica, social e ambiental, relações humanas e credibilidade.

Buscamos profissionais inovadores que sejam movidos por desafios e focados em resultados.

Se você busca uma empresa dinâmica e parceira e que investe em seus colaboradores através de capacitação constante, a Leega é o lugar para você!>> A LEEGA É PARA TODOS, ficaremos muito felizes em ter você em nosso time. Venha fazer parte da nossa história e da construção do nosso futuro.

Cadastre-se agora mesmo em nossas vagas!

Responsabilidades e atribuições

Sobre a oportunidadeVocê vai arquitetar e evoluir o datalake que é o sistema nervoso de dados da companhia — a fundação que alimenta, em tempo real, o motor de precificação dinâmica, os modelos de

ML e a inteligência comercial do grupo. É um papel de dono: você define a arquitetura

Lakehouse multi-tenant, do streaming à camada semântica, e responde pela sua confiabilidade, governança e custo.

Seus Desafios • Arquitetura Lakehouse — desenhar e evoluir o data lake em Apache Iceberg sobre

S3 — camadas bem definidas, particionamento e compaction, time-travel e suporte a

DELETE/UPDATE para a LGPD. • Streaming e CDC — construir ingestão em tempo real (Kafka, Flink, CDC com

Debezium) com evolução de schema controlada (Schema Registry) e garantias de entrega. • Transformação e orquestração — modelar a camada de transformação em dbt e orquestrar fluxos batch e de qualidade em Airflow, do crawler ao backfill. • Camada semântica — manter as definições de métricas em Cube.js — a fonte única que alimenta o BI e os agentes de IA e garante consistência em toda a empresa. • Acesso e performance — operar consulta federada e OLAP de baixa latência sobre o lake, com isolamento de custo e acesso por tenant e queries performáticas. • Qualidade, linhagem e FinOps — assegurar testes de dados, lineage e eficiência de custo, mantendo a plataforma confiável à medida que escala.

Você trabalha lado a lado com cientistas de dados, ML engineers e as áreas de negócio.

Requisitos e qualificações

Stack & Ferramentas

Lakehouse & storage: Apache Iceberg, Amazon S3, Athena + Glue (Trino + Hive na evolução)

Streaming & ingestão: Kafka (MSK), Apache Flink, Debezium (CDC), Schema Registry Transformação & orquestração: dbt, Apache Airflow

Semantic layer & OLAP: Cube.js, ClickHouse, Apache Pinot, Trino

Governança & qualidade: OpenMetadata, Lake Formation, Great Expectations Infra & dev: EKS/Kubernetes, ArgoCD, Crossplane, GitHub, Claude Code

O que Buscamos

Essenciais • Domínio de SQL e otimização de queries em ambientes distribuídos (Mínimo 5 anos). • Python com experiência sólida em PySpark ou processamento distribuído. • Orquestração (Airflow), ELT e dbt aplicados em larga escala (Mínimo 4 anos) . • Streaming (Kafka, Flink) e arquiteturas Lakehouse com Apache Iceberg (Mínimo 3 anos). • Sólida noção de governança, qualidade e modelagem de dados. • Conforto com desenvolvimento assistido por IA (Claude Code).

Diferenciais • CDC (Debezium) e OLAP de baixa latência (ClickHouse, Pinot, Trino/Athena). • Semantic Layers (Cube.js, dbt) e arquiteturas Data Mesh.• Governança e catálogo (OpenMetadata, Lake Formation). • Vector databases (Qdrant) e pipelines de dados para ML.

Informações adicionais

Trabalho RemotoTempo de Projeto: 6 meses, com possibilidade de extensão/internalização.

Free. 20 seconds. No password. See every match in this search.

Create a free Caio profile to unlock more results and save your role and location preferences.

Unlock free search
Want help applying to roles like this? Search Caio for free. If repetitive applications get heavy, Managed Job Search adds supervised execution for $99/month.
View Managed Job Search