Descripción
- El objetivo del puesto es diseñar, desarrollar y mantener procesos de integración, preparación y transformación de datos para soluciones de Business Intelligence y Analítica Avanzada, asegurando consistencia, trazabilidad y rendimiento en entornos Big Data y Cloud. El Ingeniero de Datos es responsable de construir las rutas de datos de extremo a extremo (ETL/ELT), implementar procesos automatizados y optimizar la movilidad de la información entre fuentes y destinos analíticos. Su misión es crear infraestructuras de datos escalables usando Spark, Hadoop, Hive, Databricks y plataformas en la nube (Azure/GCP), garantizando que la información esté lista para su uso en modelos predictivos, BI y machine learning.
Requisitos:
- Formación Académica: Ingeniería en Sistemas, Computación, Ciencia de Datos, Informática o afines
- Experiência Cualificado: Mínimo 6 años en implementación de procesos ETL y 2 años en entornos Big Data
- Idiomas: Inglés técnico (intermedio)
Actividades
- Diseñar y mantener procesos ETL y ELT para integrar, limpiar y transformar datos en entornos Big Data.
- Desarrollar transformaciones de datos en Spark (SQL, Scala o Python) para procesamiento batch y streaming.
- Realizar modelado de datos columnar orientado a consumo, optimización y desempeño.
- Elegir y optimizar tecnologías Big Data (Hadoop, Hive, Databricks) según el volumen y tipo de fuente.
- Diseñar modelos dimensionales (esquema estrella y copo de nieve) para almacenes de datos y analítica BI.
- Comprender los requerimientos y flujos de negocio para proponer soluciones de integración de datos.
- Implementar flujos de trabajo de orquestación y automatización (Airflow, Oozie, etc.).
- Desarrollar procesos para la extracción desde sistemas OLTP y la carga en repositorios OLAP/DWH
- Asegurar el rendimiento y la escalabilidad, optimizando consultas SQL y operaciones en discos distribuidos.
- Integrar servicios mediante APIs REST y ot
📌 Data Engineer Sr (Municipio de Huixquilucan)
🏢 Axity
📍 Municipio de Huixquilucan
Postulate a este anuncio
Muestra tus habilidades a la empresa, rellenar el formulario y deja un toque personal en la carta, ayudará el reclutador en la elección del candidato.