Buscamos un Data Quality Engineer con sólida experiencia en Azure y Databricks para asegurar la calidad, confiabilidad y consistencia de los datos en plataformas de datos modernas. Este rol se enfoca en validar pipelines de datos, implementar controles de calidad automatizados y colaborar estrechamente con los equipos de Data Engineering y de negocio para garantizar activos de datos precisos y listos para producción.
Responsabilidades
- Diseñar e implementar un framework de calidad de datos en las capas Bronze, Silver y Gold, definiendo reglas de validación, umbrales de tolerancia y estándares de alerta.
- Construir y mantener controles de calidad de datos automatizados dentro de los pipelines de Databricks (conteo de filas, validación de nulos, integridad referencial, validación de esquemas y aserciones de reglas de negocio).
- Ser responsable de la conciliación entre los sistemas de origen y las capas de Databricks, asegurando que los datos de origen se carguen con precisión y que las transformaciones produzcan los resultados esperados.
- Validar los resultados de la resolución de identidad en la capa Silver, revisando tasas de coincidencia, investigando falsos positivos y negativos, y asegurando que los identificadores empresariales se asignen correctamente en todas las poblaciones de origen.
- Realizar pruebas de pipeline de extremo a extremo, validando que los datos fluyan correctamente desde la ingesta hasta la capa Gold y que los informes posteriores reflejen datos precisos.
- Colaborar con los Data Engineers para definir los criterios de aceptación para los entregables de pipelines y modelos de datos de cada sprint antes de que se promocionen a producción.
- Apoyar las pruebas de aceptación de usuario (UAT) con los stakeholders de negocio del cliente, ayudándoles a validar que los resultados de la capa Gold cumplen con sus requisitos de informes.
- Documentar todos los procesos de QA, resultados de pruebas y hallazgos de calidad de datos en un formato que pueda ser entregado al equipo del cliente al cierre del proyecto.
- Monitorear la salud del pipeline post-despliegue, investigando y clasificando incidentes de calidad de datos y trabajando con los ingenieros para resolver rápidamente las causas raíz.
Requisitos
- Experiencia trabajando con plataformas de datos basadas en Azure, incluyendo Databricks.
- Sólida comprensión de los frameworks de calidad de datos y metodologías de prueba para pipelines de datos.
- Experiencia validando procesos ETL/ELT y trabajando con arquitecturas por capas (Bronze, Silver, Gold).
- Sólidas habilidades en SQL y experiencia analizando grandes conjuntos de datos.
- Experiencia implementando procesos automatizados de validación y conciliación de datos.
- Familiaridad con el monitoreo, alertas y solución de problemas de pipelines de datos.
- Capacidad para colaborar con Data Engineers y stakeholders de negocio.
- Fuerte pensamiento analítico y atención al detalle.
- Experiencia documentando procesos y resultados de QA de manera estructurada.
- 3+ años de experiencia en roles de Data Engineering o Data Quality.
Idiomas
- Inglés: Avanzado (requerido para una comunicación efectiva con equipos globales).
Beneficios
- Oportunidades de aprendizaje: Certificaciones en AWS (somos Partners de AWS), Databricks y Snowflake. Acceso a rutas de aprendizaje de IA para mantenerse actualizado con las últimas tecnologías. Planes de estudio, cursos y certificaciones adicionales adaptadas a tu rol. Acceso a Udemy Business, que ofrece miles de cursos para potenciar tus habilidades técnicas y blandas. Clases de inglés para apoyar tu comunicación profesional.
- Oportunidades de viaje para asistir a conferencias de la industria y conocer clientes.
- Mentoría y Desarrollo: Planes de desarrollo de carrera y programas de mentoría para ayudarte a dar forma a tu trayectoria.
- Celebraciones y Soporte: Recompensas por días especiales para celebrar cumpleaños, aniversarios laborales y otros hitos personales. Equipamiento proporcionado por la empresa.
- Opciones de trabajo flexible para ayudarte a lograr el equilibrio adecuado.
- Otros beneficios pueden variar según tu ubicación en LATAM. Para obtener información detallada sobre los beneficios aplicables a tu ubicación específica, consulta con uno de nuestros reclutadores.
Acerca de Blend
Blend es un proveedor líder de servicios de IA, comprometido a co-crear un impacto significativo para sus clientes a través del poder de la ciencia de datos, la IA, la tecnología y las personas. Con la misión de impulsar visiones audaces, Blend aborda desafíos importantes alineando a la perfección la experiencia humana con la inteligencia artificial. La empresa se dedica a desbloquear valor y fomentar la innovación para sus clientes aprovechando personas de clase mundial y una estrategia basada en datos. Creemos que el poder de las personas y la IA puede tener un impacto significativo en tu mundo, creando un trabajo y proyectos más gratificantes para nuestra gente y clientes.
Para más información, visita www.blend360.com
Estamos buscando un Data Quality Engineer para contribuir a nuestro próximo nivel de crecimiento y expansión.