31 jul
|
Ids Comercial, S. A. De C. V.
|
México
31 jul
Ids Comercial, S. A. De C. V.
México
IDS Comercial es una empresa 100% mexicana dedicada a TI con 40 años de experiencia y presencia en México, Latinoamérica y EEUU.
Estamos acreditados en el Nivel 5 de CMMI (Capability Maturity Model Integration), modelo de calidad establecido por el Software Engineering Institute (SEI). Certificados por parte de ISO en la norma ISO/IEC 27001:2013. Contamos con distintivo de Empresa Socialmente Responsable (ESR).
¡¡TE ESTAMOS BUSCANDO!!
Ingeniero de Datos -Cloud Native
Modalidad: 100% Remota
Ubicación: México, CDMX
Requisitos:
- 3-5 años de experiencia en ingenieria de datos
- Dominio de BigQuery: CREATE TABLE/VIEW, External Tables, Scheduled Queries, optimizacion de queries
- Experiencia con Airflow y/o Concord para orquestación de pipelines
- Capacidad de mapear dependencias de datos y coordinar con owners de negocio
- Atención al detalle en validación de integridad de datos post-migración
- Python para scripting y automatización de tareas de migración
- Experiencia en retail o proyectos de consolidación de datos (deseable)
Stack Tecnico
- Cloud & Storage: GCP BigQuery, Cloud Storage, Dataflow, Data Lake (Raw/Catalog/Cmp)
- Orquestación: Apache Airflow, Concord
- Source Control: GitHub / GitHub Enterprise
- Lenguajes: SQL avanzado (BigQuery), Python (pandas, PySpark, SQLAlchemy)
- Visualización: Looker, Power BI, Tableau, Dataiku (reconexion, no desarrollo)
- Gestión: Jira
Skills Requeridos
- SQL avanzado / BigQuery
- Python (pandas, PySpark, SQLAlchemy)
- Desarrollo de pipelines ETL/ELT (Concord, Airflow o equivalentes)
- Google Cloud Platform (GCP): BigQuery, Cloud Storage, Dataflow
- Herramientas de gobierno y calidad de datos
- Control de versiones (Git / GitHub)
- Experiencia en proyectos de migración de datos(deseable)
Responsabilidades
- Migración y CMZ
- Recrear y validar estructuras de tablas en CMZ
- Migrar datos históricos por tabla con validación de integridad (volúmenes, frecuencias, reglas de negocio)
- Reconfigurar scheduled queries que generan tablas derivadas desde EDW PROD / Data Lake
- Identificar y documentar dependencias upstream/downstream por dominio
- Pipelines e Ingesta
- Desarrollar pipelines de ingesta en Airflow hacia capas Raw - Catalog - Cmp
- Configurar y validar procesos de carga en el reciente entorno gobernado
- Reconectar integraciones de sistemas y reportes (Looker, Power BI, Tableau) a nuevas tablas
- Calidad y Gobernanza
- Completar metadata de tablas migradas (owner, descripción, linaje)
- Ejecutar pruebas de validación y reconciliación de datos contra fuente original
- Levantar tickets JIRA para solicitudes de nuevos datasets con justificación de negocio
📌 Ingeniero de Datos (México)
🏢 Ids Comercial, S. A. De C. V.
📍 México