Data Engineer Sênior (Databricks)

Data Engineer Sênior (Databricks)

Data Engineer Sênior (Databricks)

Compass Uol

Gupy

Brasil

1 hora atrás

Nenhuma candidatura

Sobre

.Responsabilidades e atribuiçõesGarantia do monitoramento sobre a Qualidade dos Dados: Implementar processos para monitorar a precisão, consistência e integridade dos dados;Segurança dos Dados: Proteger os dados contra acessos não autorizados através de medidas de segurança como criptografia e controle de acesso;Colaboração com Equipes: Trabalhar em estreita colaboração com os perfis de dados e áreas de negócio para entender suas necessidades;Monitoramento e Otimização: Monitorar o desempenho da plataforma de dados e implementar melhorias para otimizar a eficiência e a escalabilidade;Documentação: Documentar processos e procedimentos de engenharia de dados para garantir que as práticas sejam replicáveis e compreensíveis para outros membros da equipe;Requisitos e qualificaçõesExperiência e conhecimento avançado em Databricks; Modelagem de Dados Dimencionale Flat;Domínio de Linguagens de Programação: Linguagens como Python, Java, Scala;Bancos de dados relacionais (como MySQL e Oracle) e não relacionais como MongoDB;Experiência em ETL (Extract, Transform, Load): O processo de ETL é fundamental para extrair dados de diferentes fontes, transformá-los conforme as necessidades do negócio e carregá-los em sistemas de destino;Proficiência em Armazenamento e Processamento Distribuído: Com o aumento dos volumes de dados, o conhecimento de ferramentas de Big Data;