Desarrollador Hadoop Senior — Mexico City Metropolitan Area

Empresa: SyDSA

Proyecto de 6 meses en Ciudad de México para Desarrollador Hadoop Senior. Se requiere dominio de SQL, Python, Databricks, Spark, big data y cloud.

Experiencia requerida

Dominio avanzado de SQL, desarrollo avanzado en Python, experiencia sólida con Databricks, Apache Spark, PySpark, procesamiento distribuido, plataformas cloud (Azure, AWS, GCP) y al menos una tecnología big data como Kafka, Hadoop, Cassandra, MongoDB, Redis, Flink o Dask.

Responsabilidades

Diseñar, desarrollar y mantener arquitecturas de datos escalables; construir y optimizar pipelines de datos; implementar procesos ETL/ELT; diseñar soluciones de integración de datos; optimizar consultas y bases de datos; implementar soluciones big data y procesamiento distribuido; colaborar con equipos de BI y analítica; garantizar calidad y disponibilidad de datos; implementar monitoreo y automatización; aplicar seguridad y gobierno de datos; participar en migración a la nube; documentar arquitecturas.

Conocimientos técnicos

SQL, PostgreSQL, SQL Server, Oracle, Python, ETL/ELT, Data Pipelines, Databricks, Apache Spark, PySpark, Azure, AWS, Google Cloud, Kafka, Hadoop, Cassandra, MongoDB, Redis, Apache Flink, Dask, Docker, Kubernetes, Data Lake, Lakehouse, DataOps, CI/CD, Power BI, Tableau, Qlik Sense, Machine Learning, microservicios, gobierno de datos.

Habilidades

Trabajo en equipo, colaboración con equipos de BI, Analytics y Ciencia de Datos, orientación a calidad y gobierno de datos, metodologías ágiles.