Engenheiro de Dados Sênior
Indexed description
A Unik.RH é uma empresa especializada que oferece serviços para ajudar outras organizações a gerenciar e otimizar suas práticas de gestão de pessoas. Sua missão é conectar talentos com oportunidades e com isso trazer um impacto para o futuro das empresas e dos profissionais.
Responsabilidades
Projeta, constrói, otimiza e sustenta toda a plataforma de dados baseada em Azure Databricks, garantindo qualidade, governança, segurança, performance e escalabilidade. Projeta, implementa e evolui arquiteturas Lakehouse utilizando o padrão Medallion (Bronze, Silver, Gold) em produção. Define padrões de modelagem, versionamento e organização de tabelas no Unity Catalog, incluindo permissões, lineage e governança. Documenta arquiteturas, fluxos, padrões e boas práticas de engenharia de dados. Constrói pipelines robustos de ingestão, transformação e disponibilização de dados em Python, PySpark e SQL avançado. Desenvolve pipelines em batch e streaming utilizando Databricks Jobs, Workflows, Delta Live Tables / Lakeflow. Implementa processos de reconciliação, checagem e qualidade de dados (DQX) com testes automatizados. Otimiza performance de jobs Spark, particionamento, caching e estratégias de custo. Administra e opera recursos de dados no Azure Databricks, ADLS, Azure Data Factory, Azure DevOps, Azure Functions, Synapse Analytics, entre outros. Abre, acompanha e detalha incidentes na Azure, com inglês intermediário. Monitora, observa e trata falhas em pipelines, garantindo confiabilidade e SLA. Configura permissões, acessos e governança via Unity Catalog. Garante segurança, integridade e conformidade dos dados, incluindo LGPD. Implementa padrões de auditoria, lineage e rastreabilidade. Cria testes automatizados de qualidade, reconciliação e validação de dados. Utiliza ferramentas como DQX Databricks para monitoramento contínuo. Realiza data profiling, verificação de integridade e consistência. Versiona código com Git e implementa pipelines de CI/CD em Azure DevOps. Automatiza deploys de notebooks, workflows, bundles e artefatos Databricks. Implementa Asset Bundles para empacotamento e promoção entre ambientes. Trabalha em conjunto com times de Analytics, Ciência de Dados, Engenharia de Software e Arquitetura. Apoia equipes menos experientes, promovendo boas práticas de engenharia. Traduz necessidades de negócio em soluções escaláveis e eficientes.
Atuações anteriores em Arquiteto de Dados, Cientista de Dados Sênior, Analista de Dados Sênior ou Engenheiro de Big Data podem indicar afinidade com algumas das atividades desta posição.
Requisitos Desejáveis
Escolaridade: Ensino superior completo
Experiência: Necessário experiência
Remuneração e Benefícios
- Salário: Faixa salarial será informada na entrevista.
- A combinar.
- Contrato: Efetivo. Presencial. Candidatos de Nova Lima, Sabará, Contagem ou Raposos também são considerados para esta vaga.
- Período: Tempo integral
- Jornada: Segunda a Sexta-feira. Horário comercial.
Create a free Caio profile to unlock more results and save your role and location preferences.
Unlock free search