Engenheiro de Dados Sênior

Na Stefanini, acreditamos no poder da colaboração. Co-criamos soluções inovadoras em parceria com nossos clientes, combinando tecnologia de ponta, inteligência artificial e a criatividade humana. Estamos na vanguarda da resolução de problemas de negócios, proporcionando impacto real em escala global.

Ao se juntar à Stefanini, você se torna parte de uma jornada global de transformação. Estamos empenhados em criar impacto positivo não apenas nos negócios, mas também na vida de nossos colaboradores. Se você procura uma oportunidade de crescimento profissional em uma empresa que valoriza inovação, respeito, autonomia e parceria, você encontra aqui!

Junte-se a nós e seja parte da mudança!#LI-REMOTE#LI-AS2

Responsabilidades e atribuições

Projetar, desenvolver, manter e otimizar pipelines de dados de média e alta complexidade;

Construir soluções escaláveis para ingestão, transformação e processamento de grandes volumes de dados;

Desenvolver soluções utilizando Python, SQL, Spark e PySpark;

Criar, evoluir e otimizar soluções na plataforma Databricks;

Atuar em arquiteturas de Data Lake, Lakehouse e Data Warehouse;

Definir estratégias de particionamento, processamento distribuído e otimização de performance;

Investigar e solucionar problemas críticos relacionados a processamento, integração e qualidade dos dados;

Implementar mecanismos de observabilidade, monitoramento, alertas e controles de qualidade;

Aplicar boas práticas de segurança, governança, privacidade e proteção de dados;

Participar de decisões técnicas e da definição de padrões e boas práticas de desenvolvimento;

Realizar code reviews, disseminar conhecimento e apoiar tecnicamente profissionais Pleno e Júnior;

Interagir com as áreas de Arquitetura, Segurança, Infraestrutura, Desenvolvimento e Negócios;

Apoiar estimativas técnicas, definição de escopo e planejamento das entregas;

Contribuir para a evolução da maturidade técnica e operacional das soluções de dados.

Requisitos e qualificações

Experiência sólida em Engenharia de Dados;

Experiência comprovada em soluções de alta complexidade e processamento de grandes volumes de dados;

Conhecimento avançado em Python;

Conhecimento avançado em SQL;

Conhecimento avançado em Apache Spark/PySpark;

Experiência com Databricks;

Experiência com processos de ETL/ELT e processamento distribuído;

Conhecimento em Azure Data Lake Storage — ADLS;

Experiência com Azure Data Factory ou ferramentas equivalentes de orquestração;

Conhecimento em bancos de dados relacionais e não relacionais — SQL e NoSQL;

Experiência com arquiteturas de Data Lake, Lakehouse e Data Warehouse;

Conhecimento de modelagem de dados;

Experiência com Git e práticas de CI/CD;

Conhecimento de APIs e integração entre sistemas;

Conhecimento de segurança, governança e proteção de dados;

Conhecimento de otimização e tuning de pipelines e processos de dados;

Vivência em ambientes Cloud e com práticas de desenvolvimento, sustentação e operação de soluções críticas.

Diferencial

Experiência com Delta Lake;

Conhecimento em Databricks Workflows;

Experiência com Unity Catalog;

Conhecimento em tecnologias de streaming, como Kafka e Azure Event Hubs;

Experiência com Terraform e práticas de Infrastructure as Code — IaC;

Certificações Microsoft Azure ou Databricks;

Experiência anterior no segmento financeiro ou bancário;

Conhecimento de frameworks e ferramentas de observabilidade aplicados a dados.

Informações adicionais

🍛 Vale-alimentação ou vale-refeição;👨🏼‍🎓 Desconto em cursos, universidades e instituições de idiomas;📚 Academia Stefanini — plataforma com cursos on-line, gratuitos, atualizados e com certificado;🗣 Mentoring;💉 Clube de vantagens para consultas e exames;🏥 Assistência médica;🦷 Assistência odontológica;💰 Clube de vantagens e descontos nos melhores estabelecimentos;🛫 Clube de viagens;🐶 Convênio para pets.