Senior Big Data Engineer (GCP / Python / PySpark /Streaming) — Mexico

Empresa: Apex Systems

Ingeniero Senior de Big Data con GCP, Python, PySpark y streaming para construir y optimizar pipelines de datos batch y en tiempo real.

Experiencia requerida

6 o más años en Ingeniería de Datos o Big Data, con Python, Airflow, PySpark, Kafka y GCP.

Responsabilidades

Desarrollar y mantener pipelines de datos batch y streaming, orquestar flujos con Airflow, procesar datos distribuidos con PySpark, integrar APIs REST y aplicar CI/CD en GCP.

Conocimientos técnicos

Python, Apache Airflow, PySpark, Spark SQL, Scala, SQL, bases de datos relacionales y NoSQL, Apache Kafka, Spark Streaming, GCP (BigQuery, Dataproc), APIs REST, CI/CD con GitLab CI, modelado de datos y optimización de rendimiento.

Habilidades

Comunicación verbal excelente, resolución técnica de problemas, explicar decisiones de diseño en entornos colaborativos.

Escolaridad

Licenciatura en Ciencias de la Computación, Ingeniería, Tecnologías de la Información o experiencia equivalente.