Engenheiro de Dados Sênior

Engenheiro de Dados Sênior

Engenheiro de Dados Sênior

Matrix Energia

Gupy

São Paulo São Paulo Brasil

1 semana atrás

Nenhuma candidatura

Sobre

Nós da Matrix existimos para acelerar a transformação do mercado energético brasileiro. Atuamos no Mercado Livre de Energia, comercializando energia renovável, competitiva e certificada para consumidores livres.Somos uma empresa de pessoas inovadoras, dinâmicas, ágeis e acreditamos que os resultados e desempenho dos nossos colaboradores devem ser reconhecidos.Somos uma das melhores empresas para trabalhar, certificados pela GPTW.Responsabilidades e atribuiçõesSeu dia a dia na Matrix:Desenvolver e otimizar Pipelines de Dados (Batch) performáticos e escaláveis para ingestão de dados estruturados, semi-estruturados e não estruturados ao nosso Data Lake (GCS);Desenvolver e gerenciar cargas de ETL/ELT para processamento de dados em Spark/SQL para alimentar as camadas Trusted (Silver) e Refined (Gold) em nosso Data Warehouse (BigQuery);Atuar na consolidação e modelagem de dados de fontes internas e externas a fim de viabilizar iniciativas de Analytics, Business Intelligence, Data Science, GenAI e Produtos de Dados;Desenvolver integrações de dados online (Streaming) para ingestão e processamento de dados na GCP;Projetar e implementar arquiteturas de dados eficientes, otimizando tempo de desenvolvimento, performance e custo computacional;Replicar regras de negócio no processo de transformação de dados para a geração de datasets;Criar e manter processos de Data Quality, Data Assurance, Linhagem e Versionamento de Dados;Ser a Referência Técnica do Time de Data & Analytics da Matrix Energia, suportando as iniciativas mais inovadoras e ousadas do nosso cotidiano.Requisitos e qualificaçõesPara assumir esse desafio, precisamos que você tenha:Graduação em cursos de Computação, Sistemas, Tecnologia, Dados ou áreas afins;Sólida experiência nas linguagens Python, Spark/SQL;Experiência em CI/CD, preferencialmente em GitHub;Experiência em Google Cloud Platform (GCP), Google Cloud Storage (GCS) e Google BigQuery;Experiência com ferramentas de orquestração de dados tais como Airflow ou Prefect;Experiência com tecnologias de data streaming tais como Pub/Sub ou Azure Functions;Conhecimento sobre Modelagem de Dados na metodologia Medallion.Informações adicionaisO que oferecemos:Ser protagonista de seu desenvolvimento em um ambiente de oportunidades, aprendizagem, crescimento, expansão e projetos desafiadores;Saúde de qualidade com a Omint: tenha acesso a uma rede de saúde e odontológica de primeira linha através da Omint com cobertura nacional;Cartão Alelo Pod para seus gastos flexíveis com o Vale Refeição e Alimentação, sendo aceito nas principais redes de restaurantes e supermercados;Nossa jornada de trabalho tem carga horária flexível e sustentável.Mobilidade: você pode escolher uma modalidade que faz sentido para você! Vale Transporte, auxílio combustível ou estacionamento;Total Pass: plataforma online dedicada à promoção da qualidade de vida, saúde e bem-estar. Planos que proporcionam acesso a academias, estúdios e serviços online, com descontos exclusivos da Matrix, abrangendo não apenas você, mas também até 3 dependentes;Seguro de vida em grupo;Participação nos Lucros e Resultados (PLR), mediante atingimento de metas e performance;Trabalhar com uma equipe fantástica em um ambiente colaborativo que busca construir um futuro brilhante e mais sustentável.