Engenheiro de Dados AWS/Databricks

Na Stefanini, acreditamos no poder da colaboração. Co-criamos soluções inovadoras em parceria com nossos clientes, combinando tecnologia de ponta, inteligência artificial e a criatividade humana. Estamos na vanguarda da resolução de problemas de negócios, proporcionando impacto real em escala global.Ao se juntar à Stefanini, você se torna parte de uma jornada global de transformação. Estamos empenhados em criar impacto positivo não apenas nos negócios, mas também na vida de nossos colaboradores. Se você procura uma oportunidade de crescimento profissional em uma empresa que valoriza inovação, respeito, autonomia e parceria, você encontra aqui!Junte-se a nós e seja parte da mudança!#LI-REMOTE#LI-LV1Responsabilidades e atribuições🚀 Engenheiro(a) de Dados AWS/Databricks 💙Se você é apaixonado(a) por Engenharia de Dados, plataformas modernas e projetos de alto impacto, essa oportunidade é para você!Você fará parte de um projeto estratégico voltado à estruturação da Governança de Dados, atuando na construção de pipelines, qualidade, catalogação e governança em uma arquitetura moderna baseada em Databricks.📩 Se você busca um projeto desafiador, utilizando tecnologias modernas de Engenharia de Dados e Governança, queremos conhecer o seu perfil!🎯 Atividades:✅ Construir e manter pipelines de ingestão, transformação e curadoria de dados;✅ Desenvolver pipelines ELT/ETL utilizando PySpark e SQL nas camadas Medallion;✅ Implementar regras de qualidade de dados, monitoramento e padrões de remediação;✅ Realizar profiling de dados e inventário de fontes para avaliação e governança;✅ Catalogar datasets e aplicar políticas de tratamento compatíveis com a LGPD utilizando Unity Catalog;✅ Atuar na integração de APIs, diferentes fontes de dados e processos de orquestração.Requisitos e qualificações💻 Requisitos:✔️ Experiência sólida como Engenheiro(a) de Dados;✔️ Databricks (Delta Lake);✔️ PySpark e SQL;✔️ Construção de pipelines ELT/ETL;✔️ Arquitetura Medallion;✔️ Ingestão Batch e Streaming (Auto Loader, Kafka e Structured Streaming);✔️ Modelagem Dimensional e Data Vault;✔️ dbt e/ou Delta Live Tables (DLT);✔️ Frameworks de qualidade de dados (Great Expectations, DLT Expectations);✔️ Observabilidade e monitoramento de pipelines;✔️ Orquestração com Databricks Workflows e/ou Apache Airflow;✔️ Integração com APIs e diferentes fontes de dados.🌎 Inglês⚠️ Inglês Fluente é fundamental para conversação, pois o profissional atuará em ambiente internacional e participará de reuniões recorrentes em inglês.⭐ Requisitos Desejáveis:➕ Certificação Databricks Data Engineer Associate ou Professional;➕ Experiência com projetos de Governança de Dados;➕ Conhecimento em LGPD aplicada ao tratamento de dados;➕ Experiência com Unity Catalog.Informações adicionaisModalidade de Contratação: PJ ou CLT StefaniniModalidade de Atuação: 100% Remoto🍛 Vale-alimentação ou vale-refeição;👨🏼‍🎓 Desconto em cursos, universidades e instituições de idiomas;📚 Academia Stefanini — plataforma com cursos on-line, gratuitos, atualizados e com certificado;🗣 Mentoring;💉 Clube de vantagens para consultas e exames;🏥 Assistência médica;🦷 Assistência odontológica;💰 Clube de vantagens e descontos nos melhores estabelecimentos;🛫 Clube de viagens;🐶 Convênio para pets.