Data Engineer — Mexico

Empresa: HCLTech

Senior Data Engineer para diseñar, desarrollar y mantener pipelines de datos escalables y productos de datos para iniciativas de riesgo crediticio empresarial, usando Databricks, Spark, PySpark, SQL y Python.

Experiencia requerida

Experiencia sólida desarrollando y manteniendo soluciones de ingeniería de datos a escala empresarial, con ETL/ELT, procesamiento de datos a gran escala, pruebas automatizadas, monitoreo y calidad de datos.

Responsabilidades

Diseñar, desarrollar, probar y mantener pipelines de datos; construir soluciones batch y en tiempo real; implementar controles de calidad y monitoreo; migrar cargas a Databricks y nube; construir datasets curados; participar en arquitectura; solucionar problemas de producción; mentorizar ingenieros junior.

Conocimientos técnicos

Databricks, Apache Spark, PySpark, Hadoop, SQL, Python, formatos de datos Parquet, Avro, ORC, CI/CD, Git, DevOps, Airflow, modelado de datos, Java (deseable).

Habilidades

Fuertes habilidades analíticas y de resolución de problemas, comunicación efectiva, capacidad de mentoría, trabajo independiente en desafíos técnicos complejos.