Ingeniero Pyspark (Toluca de Lerdo)

Ingeniero Pyspark (Toluca de Lerdo)

03 sep
|
Icodde
|
Toluca de Lerdo

03 sep

Icodde

Toluca de Lerdo

Buscamos un(a)Ingeniero(a) Py Spark Seniorresponsable de diseñar, desarrollar y optimizar procesos de ingeniería y transformación de datos utilizandoPython y Py Spark , asegurando la calidad, disponibilidad y eficiencia de grandes volúmenes de información.La persona seleccionada participará en proyectos deData Engineering, Big Data y procesamiento distribuido , colaborando con equipos de desarrollo, arquitectura, analítica y negocio para construir soluciones escalables y de alto rendimiento.ResponsabilidadesDiseñar, desarrollar y mantener procesos deETL/ELTutilizando Py Spark y Python.Procesar y transformar grandes volúmenes de datos mediante arquitecturas distribuidas.Desarrollar pipelines de datos robustos, escalables y eficientes.Optimizar jobs de Spark, consultas y procesos de transformación para mejorar tiempos de ejecución y consumo de recursos.Trabajar con fuentes de datos estructuradas y no estructuradas.Integrar información proveniente de bases de datos, APIs, archivos y diferentes fuentes de información.Implementar procesos de validación, limpieza y transformación de datos.Participar en el diseño de arquitecturas de datos y soluciones Big Data.Monitorear y solucionar errores en pipelines y procesos de procesamiento de datos.Implementar buenas prácticas de desarrollo, control de versiones y documentación.Colaborar con Data Engineers, Data Scientists, Dev Ops,



arquitectos y equipos de negocio.Participar en procesos de automatización y mejora continua de las plataformas de datos.Requisitos técnicos+2 años de experienciaen Data Engineering o desarrollo de soluciones de procesamiento de datos.Experiencia sólida conPy Spark y Python.Conocimiento deApache Sparky procesamiento distribuido.Experiencia desarrollando procesosETL/ELT.Manejo avanzado deSQL.Experiencia con bases de datos relacionales y/o No SQL.Conocimiento de formatos comoParquet, JSON, CSV y Avro.Experiencia con herramientas de control de versiones, principalmenteGit.Conocimiento de ambientesLinux/Unix.Experiencia con alguna plataforma Cloud comoAWS, Azure o GCP.Deseable experiencia con servicios de datos comoDatabricks, AWS Glue, EMR, Azure Databricks, Synapse o similares.Deseable conocimiento de herramientas de orquestación comoAirflow.Deseable experiencia conDocker y CI/CD.
$2,000 - $3,000 a monthEni Coddeapreciamos el valor de tu red personal, por lo tanto, recompensamos con dinero en efectivo por compartirla.
Si el puesto no es de su interés pero conoces a alguien que podría estar interesado, envíanos su contacto y recibe un beneficio económico por una contratación efectiva.
De esta forma, recibes una compensación y tu contacto mejora sus condiciones laborales.

📌 Ingeniero Pyspark (Toluca de Lerdo)
🏢 Icodde
📍 Toluca de Lerdo

Postulate a este anuncio

Muestra tus habilidades a la empresa, rellenar el formulario y deja un toque personal en la carta, ayudará el reclutador en la elección del candidato.

Suscribete a esta alerta:

Recibe por email las nuevas ofertas de trabajo para: ingeniero pyspark (toluca de lerdo) / toluca de lerdo

Suscribete a esta alerta:

Recibe por email las nuevas ofertas de trabajo para: ingeniero pyspark (toluca de lerdo) / toluca de lerdo