Sobre

• Posting Description

• Engenheiro de Dados Pleno (Pcd)
• Você possui interesse em atuar em projetos com Databricks Databricks, Delta Lake e integração de múltiplas fontes de dados? Se você respondeu “SIM!”, este pode ser o próximo passo em sua carreira como Engenheiro de Dados Pleno (Pcd).
• Esta é uma função par atuar presencialmente no escritório localizado em São Paulo/SP.
• Aon está no negócio de melhores decisões
• Na Aon, moldamos decisões para melhor proteger e enriquecer a vida das pessoas no mundo todo.
• Como organização, estamos unidos pela confiança como uma equipe inclusiva e diversificada, e somos apaixonados por ajudar nossos colegas e clientes a terem sucesso.
• Como será o seu dia
• Desenvolver e manter pipelines de ingestão e transformação de dados com supervisão.
• Contribuir para a implementação de arquitetura Lakehouse em projetos internos.
• Auxiliar na automação de testes e processos de deploy integrados ao DevOps.
• Apoiar a gestão de catálogo de dados e controle de versionamento.
• Monitorar jobs Spark e propor melhorias de desempenho sob orientação.
• Como esta oportunidade é diferente
• Nesta posição você poderá trazer todo seu conhecimento em ambientes de dados e cloud (AWS ou Azure), atuando na construção e manutenção de pipelines e plataformas de dados. Participação ativa em projetos com Databricks, Delta Lake e integração de múltiplas fontes de dados. Comprometido com boas práticas de governança, acessibilidade e colaboração em equipes diversas.
• Habilidades e experiência que levarão ao sucesso
• Formação Acadêmica completa ou em curso em Tecnologia da Informação.
• Databricks & Spark
• Desenvolvimento e manutenção de pipelines de dados com PySpark e Spark SQL em Databricks.
• Implementação de projetos com Delta Lake sobre Amazon S3.
• Aplicação de práticas básicas de otimização de jobs Spark (particionamento, caching).
• Utilização de Databricks Workflows para orquestração de tarefas.
• AWS (Amazon Web Services)

Manipulação de dados em Amazon S3

• Noções de IAM e segurança de dados em buckets.
• Arquitetura e Plataforma de Dados

Apoio na implementação de arquitetura Lakehouse (bronze, silver, gold)

• Integração de dados de bancos relacionais, APIs e arquivos em lote.
• Modelagem básica e versionamento com Delta Lake.
• DataOps & Governança
• Colaboração em processos de CI/CD utilizando Databricks Repos ou Azure DevOps.
• Monitoramento básico de pipelines com logs e alertas.
• Apoio em controles de qualidade de dados (Great Expectations ou soluções similares).
• Auxílio na gestão de permissões e organização de dados via Unity Catalog.
• Linguagens e Ferramentas
• Domínio prático em Python e SQL.
• Experiência com formatos de dados como JSON e Parquet.
• Utilização de notebooks colaborativos em Databricks.
• Conhecimento em dados em streaming (Structured Streaming ou Kafka).
• Conhecimento introdutório em Snowflake.
• Noções de Infra as Code (Terraform).
• Interesse em aprender sobre Data Mesh e Data Contracts.
• Inglês intermediário é considerado um diferencial.
• Como apoiamos nossos colegas
• Além do nosso pacote de benefícios abrangente, incentivamos uma equipa e atmosfera de trabalho inclusiva. Mais, o nosso ambiente ágil permite-lhe gerir o seu bem-estar e o equilíbrio entre o trabalho e a vida pessoal, garantindo que pode dar o seu melhor na Aon. Adicionalmente, todos os colegas desfrutam de dois “Dias Globais de Bem-Estar” por ano, incentivando-os a reservar tempo para se concentrarem em si próprios. Oferecemos uma variedade de soluções de estilo de trabalho também para os nossos colegas.
• A nossa cultura de aprendizagem contínua inspira-o e prepara-o para aprender, partilhar e crescer, ajudando-o a atingir o seu potencial máximo. Como resultado, na Aon está mais conectado, mais relevante e mais valorizado.
• A Aon valoriza um local de trabalho inovador e inclusivo, onde todos os colegas se sintam capazes de serem autênticos. A Aon orgulha-se de ser um local de trabalho com oportunidades iguais para todos.
• A Aon oferece oportunidades iguais de emprego a todos os funcionários e candidatos a emprego, independentemente de raça, cor, religião, credo, sexo, orientação sexual, identidade de gênero, origem nacional, idade, deficiência, veterano, estado civil, status de parceiro doméstico ou outro status legalmente protegido.
• Aceitamos inscrições de todos e oferecemos aos indivíduos com deficiência ferramentas de acessibilidade para participarem de processos seletivos, como candidatura, entrevista e para desempenharem funções de trabalho essenciais, uma vez contratados. Se você quiser saber mais sobre as nossas políticas de acessibilidade, envie um e-mail para ReasonableAccommodations@Aon.com
• #LI-V1