directohace 16 horas
Ingeniero de Datos Senior
Cashea
Buenos Aires, Buenos AiresRemoto · Tiempo completo
Senior5+ años
Este aviso fue publicado originalmente en inglés, así que es probable que necesites inglés para este puesto. La descripción puede estar traducida automáticamente al español; ante la duda, revisá el aviso original con el botón de postularte.
Cashea busca un Ingeniero de Datos Senior para liderar la plataforma de datos, optimizar pipelines y asegurar la calidad de los datos en un entorno GCP con BigQuery, Airflow y dbt. Se requiere experiencia en GCP, Python, SQL y CI/CD.
Descripción del puesto
Somos Cashea 👋, y tenemos la misión de devolverle a los venezolanos la oportunidad de acceder a crédito a través de un modelo de negocio BNPL (Buy Now, Pay Later). Desde nuestro lanzamiento en 2022, nos hemos dedicado a promover la inclusión financiera. Hoy contamos con más de 9 millones de usuarios activos, tanto consumidores como comercios, y nos hemos convertido en una marca de confianza en Venezuela, conquistando corazones y mentes 💛. Acerca del rol: Buscamos un Senior Data Engineer que sea responsable de la plataforma que transforma datos operativos brutos en datos confiables y listos para análisis, en los que toda la empresa confía. Mantendrás nuestra capa de orquestación y transformación escalando a medida que crecemos, con profunda experiencia práctica en Cloud Composer (Airflow), dbt y BigQuery en GCP. Serás la persona que establezca las buenas prácticas de ingeniería de datos como norma en todos los equipos. Operamos un medallion lakehouse en GCP: pipelines de Datastream CDC replican docenas de bases de datos PostgreSQL en datasets de bronce de BigQuery, y dbt on BigQuery las transforma a través de las capas de bronce, plata y oro. La orquestación se ejecuta en Cloud Composer / Airflow. Este rol combina construcción profunda con habilitación: escalarás Airflow, fortalecerás la plataforma, optimizarás costos y rendimiento, y dejarás a cada equipo más capacitado para entregar datos confiables de lo que estaba antes. En general, harás lo siguiente: - Serás responsable de la salud, el rendimiento y la escalabilidad de nuestros entornos de Cloud Composer (Airflow), incluyendo el dimensionamiento del entorno, el autoescalado de workers, el rendimiento del parseo de DAGs y la confiabilidad de la orquestación en staging y producción. - Diseñarás y extenderás nuestra capa de transformación dbt on BigQuery: modelos incrementales y de CDC merge, patrones de deduplicación y SCD, macros, tests y frescura de fuentes a través de las capas de bronce, plata y oro. - Serás responsable de nuestros pipelines de Datastream CDC que alimentan BigQuery, manteniendo el flujo de PostgreSQL a BigQuery saludable en esquemas, backfills y replicación. - Construirás y mejorarás nuestro DataOps: CI/CD para DAGs y dbt con GitHub Actions y Workload Identity Federation, pruebas automatizadas, tests de humo de despliegue y promoción segura entre entornos. - Impulsarás la calidad de los datos y la observabilidad: chequeos de frescura, linaje, captura de artefactos de dbt y alertas para que los problemas se detecten antes de que los consumidores los noten. - Definirás y promoverás estándares de ingeniería de datos para el diseño de modelos, incrementalidad, idempotencia y procesos de cambio seguros, y mentorizarás a ingenieros a través de revisiones, pair programming y documentación. - Te asociarás con los equipos de plataforma, producto y análisis como el puente que hace que la plataforma de datos sea autoservicio, trabajando dentro de nuestra Infraestructura como Código (IaC) con OpenTofu y Terragrunt. Calificaciones: - Título universitario en Ciencias de la Computación o un campo relacionado, o experiencia práctica equivalente. - Más de 5 años en ingeniería de datos o un rol estrechamente relacionado, construyendo y operando plataformas de datos de producción a escala. - Sólida experiencia práctica con Apache Airflow (idealmente Cloud Composer): diseño de DAGs, operadores, programación y escalado de orquestación a medida que crecen las cantidades de pipelines. - Sólida experiencia práctica con dbt, incluyendo modelos incrementales, testing, macros y gestión de un grafo de modelos grande. - Sólida experiencia práctica con BigQuery: modelado de datos, particionamiento y clustering, optimización de consultas y control de costos. - Sólida experiencia operando servicios de datos en Google Cloud Platform (GCP). - Dominio de Python para el desarrollo de pipelines y operadores, y SQL avanzado. - Comodidad con flujos de trabajo basados en Git y CI/CD (GitHub Actions o similar), tratando los pipelines de datos con el mismo rigor que el código de aplicación. - Fuertes habilidades de comunicación y relación con stakeholders, con una mentalidad de enseñanza genuina y la capacidad de mentorizar a otros. - Excelentes habilidades de resolución de problemas y pensamiento analítico, con curiosidad genuina por las nuevas tecnologías. Habilidades deseables: - Experiencia con Datastream u otras herramientas de CDC que alimentan data warehouses analíticos, incluyendo backfills y resolución de problemas de replicación. - Familiaridad con Infraestructura como Código (Terraform u OpenTofu, idealmente Terragrunt) para gestionar recursos de datos. - Experiencia con Dataplex u otras herramientas de calidad de datos, gobernanza y linaje, y con el manejo de PII en un contexto regulado. - Familiaridad con astronomer-cosmos para ejecutar dbt dentro de Airflow. - Conocimiento de servicios de datos y mensajería de GCP como Pub/Sub y Cloud Storage. - Un historial de optimización de costos y rendimiento en un data warehouse, incluyendo prácticas de FinOps. - Experiencia construyendo en fintech, pagos o crédito, donde la corrección de los datos es crucial. - Dominio del español y el inglés. Por qué te encantará trabajar en Cashea: En Cashea, tenemos una cultura de trabajo basada en la confianza y el propósito. Si necesitas una pista de por qué somos una buena opción, estos son nuestros valores fundamentales: - No trabajamos en piloto automático. Todo lo que hacemos es intencional. Nos encanta desarrollar ideas con plena conciencia del impacto que pueden tener en nuestros usuarios. Tu creatividad y curiosidad son nuestros activos más importantes. - Tu voz importa. Escuchamos y damos espacio a ideas y comentarios. - Todos pertenecen, y lo que es importante para ti es importante para nosotros. - Valoramos la transparencia. La claridad nos mantiene conectados y con los pies en la tierra. - Por último, pero no menos importante, nos enfocamos en el impacto real. Si quieres trabajar con nosotros, completa la solicitud. ¡Nos encantaría conocerte!
Responsabilidades
- Ser dueño de la salud, rendimiento y escalabilidad de los entornos Cloud Composer (Airflow)
- Diseñar y extender la capa de transformación dbt en BigQuery
- Ser dueño de los pipelines Datastream CDC
- Construir y mejorar DataOps (CI/CD, pruebas automatizadas)
- Impulsar la calidad y observabilidad de los datos
- Definir y promover estándares de ingeniería de datos
- Ser puente entre los equipos de plataforma, producto y analítica
- Trabajar con Infraestructura como Código (OpenTofu, Terragrunt)
Habilidades
Construcción y operación de plataformas de datosDiseño de DAGsEscalado de orquestaciónGestión de modelos incrementalesPruebas de modelosMacrosGestión de grafos de modelosModelado de datosParticionamiento y clusteringOptimización de consultasControl de costosOperación de servicios de datosDesarrollo de pipelinesDesarrollo de operadoresFlujos de trabajo basados en GitCI/CDPruebas automatizadasComunicación con stakeholdersMentoríaResolución de problemasPensamiento analíticoCuriosidad tecnológicaEnseñanzaCuriosidadComunicaciónResolución de problemasPensamiento analítico
Trabajos similares
Más ofertas de Cashea
Más empleos de Tecnología y Sistemas en Buenos Aires
Explorar empleos relacionados
¿Te interesa empleos en Buenos Aires? Creá una alerta y te avisamos.