Senior Data Engineer

En Openpay, nuestro equipo de Data & AI Products busca un Data Engineer para asegurar la calidad y el acceso oportuno a nuestros datos.

Formarás parte de un equipo multidisciplinario de ingenieros, científicos y analistas de datos. Si tu pasión es diseñar y construir sistemas robustos en Databricks que transformen el dato crudo en conocimiento de valor, ¡esta es tu oportunidad de habilitar la innovación!

¿Cuál será tu misión principal?

Asegurar la calidad, disponibilidad y gobernanza de los datos de alto volumen, liderando el diseño y la construcción de arquitecturas Data Lakehouse escalables. Tu trabajo será fundamental para que los equipos de negocio y analítica puedan generar modelos de IA/ML y BI de forma eficiente.

¿Qué harás en tu día a día?

• Estrategia y Construcción: Diseñar, construir y desplegar pipelines de ETL/ELT escalables en Databricks, enfocados en la arquitectura Medallion.
• Desarrollo de Alto Rendimiento: Programar y optimizar transformaciones complejas de datos utilizando PySpark/Spark SQL para garantizar la eficiencia.
• Gobernanza y Confiabilidad: Implementar soluciones de ingesta (batch y streaming) y aplicar Databricks Unity Catalog, validando la calidad del dato con Data Quality Checks automatizados.
• Sostenibilidad Operativa: Gestionar el ciclo de vida del código (CI/CD), monitorear el rendimiento y optimizar la infraestructura de AWS y Databricks para la máxima disponibilidad.

¿Qué conocimientos y experiencia buscamos?

Buscamos profesionales con experiencia comprobada en:

• Diseño y construcción de pipelines de datos y arquitecturas tipo Medallion en Databricks.
• Dominio de lenguajes clave: Python (PySpark, automatización) y SQL ANSI / Spark SQL.
• Conocimiento indispensable del ecosistema Lakehouse: Apache Spark 3.0+, Delta Lake y herramientas de AWS para ingesta y streaming.
• Comprensión del ciclo de vida de Machine Learning (ML) y conceptos de Feature Engineering.

El equipo de Data & AI Products te espera para trabajar en proyectos multidisciplinarios. Si buscas un rol de ingeniería de datos donde tu trabajo de alto rendimiento esté directamente alineado con la estrategia de la compañía para generar impacto, ¡únete a nosotros!