Data Engineer — Mexico

Empresa: Elios AI

Dos Data Engineers para construir y operar la capa de datos de una herramienta de enriquecimiento sobre Databricks, implementando 26 tablas gobernadas en capas core, ledger y serving.

Experiencia requerida

5+ años construyendo pipelines de datos en producción, con responsabilidad real sobre lo que corre en un schedule.

Responsabilidades

Construir jobs PySpark en Databricks, levantar esquema gobernado net-new siguiendo patrones medallion, gestionar ingesta de archivos gobernada con validación, versionado, checksums, quality gates y rutas de rechazo/replay, integrar sistemas externos vía REST, diseñar capa de cómputo batch, implementar patrón dual store con PostgreSQL publicando a Delta, ingerir salidas de modelos, implementar row-level security y acceso basado en Entra ID, configurar monitoreo y alertas.

Conocimientos técnicos

Databricks, PySpark, Delta Lake merge semantics, Unity Catalog, Databricks Asset Bundles o job YAML, arquitectura medallion, PostgreSQL, ingesta de archivos con validación/versionado/checksums/replay, integración REST con autenticación, row-level security, Entra ID, monitoreo y alertas de batch y calidad de datos, diseño de cómputo batch (desagregación, agregados precalculados, scoring de precisión/sesgo), ingesta de salidas de ciencia de datos (atribución SHAP, intervalos de predicción conformal).

Habilidades

Ownership end-to-end, trabajo con contratos de datos, capacidad de cuestionar diseños que no resisten datos reales, comunicación técnica en español e inglés.

Prestaciones y beneficios

Trabajo remoto, contrato de largo plazo, autonomía para decidir la implementación, ciclos de entrega cortos sin cadenas largas de aprobación.