Big Data Engineer

Big Data Engineer

Big Data Engineer

Stefanini Latam

Gupy

Cdmx México

2 horas atrás

Nenhuma candidatura

Sobre

¡Sé parte de Stefanini!​En Stefanini somos más de 30.000 genios, conectados desde 41 países, haciendo lo que les apasiona y co-creando un futuro mejor.​Responsabilidades y atribucionesComo parte del equipo de Data Engineering, serás responsable del diseño, desarrollo y operación de sistemas de datos a gran escala que operan a nivel de petabytes. Te enfocarás en pipelines de datos en tiempo real, analítica en streaming, big data distribuido e infraestructura de machine learning. Trabajarás de la mano con ingenieros, product managers, desarrolladores de BI y arquitectos para ofrecer soluciones técnicas escalables y robustas.Funciones y Responsabilidades Esenciales:Demuestra experiencia actualizada en Data Engineering y desarrollo de pipelines de datos complejos.Experiencia en modelos ágiles.Diseñar, desarrollar, implementar y optimizar sistemas y pipelines distribuidos a gran escala que procesan grandes volúmenes de datos, con enfoque en escalabilidad, baja latencia y tolerancia a fallos.Experiencia con Java y Python para escribir pipelines de datos y capas de procesamiento.Experiencia en Airflow y GitHub.Inglés conversacional.Experiencia en la creación de jobs MapReduce.Experiencia en la escritura de consultas complejas y altamente optimizadas sobre grandes conjuntos de datos.Experiencia comprobada con tecnologías Big Data como Hadoop, Hive, Kafka, Presto, Spark y HBase.Alta competencia en SQL.Experiencia con tecnologías en la nube (GCP, Azure).Experiencia con modelos relacionales y bases de datos en memoria (deseable: Oracle, Cassandra, Druid).Apoyar la implementación y operación de pipelines de datos y soluciones analíticas.Experiencia en optimización de rendimiento de sistemas que trabajan con grandes volúmenes de datos.Experiencia en servicios de datos vía API REST (consumo de datos).Experiencia en Retail es un gran plus.Requisitos y calificacionesDE +4 a 8 años de experiencia en desarrollo de Big data.Informaciones adicionalesSueldo acorde a experienciaPrestaciones de LeyDías extra con goce se sueldoConvenios en escuelas de idiomas, entretenimiento, cursos y másVales de despensa