Ingeniero de Calidad de Datos

Blend360 busca un Ingeniero de Calidad de Datos con experiencia en Azure y Databricks para asegurar la calidad y consistencia de los datos en plataformas modernas. El rol implica validar pipelines, implementar controles de calidad automatizados y colaborar con equipos de ingeniería y negocio.

Descripción del puesto

Buscamos un Data Quality Engineer con sólida experiencia en Azure y Databricks para asegurar la calidad, confiabilidad y consistencia de los datos en plataformas de datos modernas. Este rol se enfoca en validar pipelines de datos, implementar controles de calidad automatizados y colaborar estrechamente con los equipos de Data Engineering y de negocio para garantizar activos de datos precisos y listos para producción. Responsabilidades: - Diseñar e implementar un framework de calidad de datos en las capas Bronze, Silver y Gold, definiendo reglas de validación, umbrales de tolerancia y estándares de alerta. - Construir y mantener controles de calidad de datos automatizados dentro de los pipelines de Databricks (conteo de filas, validación de nulos, integridad referencial, validación de esquemas y aserciones de reglas de negocio). - Ser responsable de la conciliación entre los sistemas de origen y las capas de Databricks, asegurando que los datos de origen se carguen con precisión y que las transformaciones produzcan los resultados esperados. - Validar los resultados de la resolución de identidad en la capa Silver, revisando tasas de coincidencia, investigando falsos positivos y negativos, y asegurando que los identificadores empresariales se asignen correctamente en todas las poblaciones de origen. - Realizar pruebas de pipeline de extremo a extremo, validando que los datos fluyan correctamente desde la ingesta hasta la capa Gold y que los informes posteriores reflejen datos precisos. - Colaborar con los Data Engineers para definir los criterios de aceptación para los entregables de pipelines y modelos de datos de cada sprint antes de que se promocionen a producción. - Apoyar las pruebas de aceptación de usuario (UAT) con los stakeholders de negocio del cliente, ayudándoles a validar que los resultados de la capa Gold cumplen con sus requisitos de informes. - Documentar todos los procesos de QA, resultados de pruebas y hallazgos de calidad de datos en un formato que pueda ser entregado al equipo del cliente al cierre del proyecto. - Monitorear la salud del pipeline post-despliegue, investigando y clasificando incidentes de calidad de datos y trabajando con los ingenieros para resolver rápidamente las causas raíz. Requisitos: - Experiencia trabajando con plataformas de datos basadas en Azure, incluyendo Databricks. - Sólida comprensión de los frameworks de calidad de datos y metodologías de prueba para pipelines de datos. - Experiencia validando procesos ETL/ELT y trabajando con arquitecturas por capas (Bronze, Silver, Gold). - Sólidas habilidades en SQL y experiencia analizando grandes conjuntos de datos. - Experiencia implementando procesos automatizados de validación y conciliación de datos. - Familiaridad con el monitoreo, alertas y solución de problemas de pipelines de datos. - Capacidad para colaborar con Data Engineers y stakeholders de negocio. - Fuerte pensamiento analítico y atención al detalle. - Experiencia documentando procesos y resultados de QA de manera estructurada. - 3+ años de experiencia en roles de Data Engineering o Data Quality. Idiomas: - Inglés: Avanzado (requerido para una comunicación efectiva con equipos globales). Beneficios: - Oportunidades de aprendizaje: Certificaciones en AWS (somos Partners de AWS), Databricks y Snowflake. Acceso a rutas de aprendizaje de IA para mantenerse actualizado con las últimas tecnologías. Planes de estudio, cursos y certificaciones adicionales adaptadas a tu rol. Acceso a Udemy Business, que ofrece miles de cursos para potenciar tus habilidades técnicas y blandas. Clases de inglés para apoyar tu comunicación profesional. - Oportunidades de viaje para asistir a conferencias de la industria y conocer clientes. - Mentoría y Desarrollo: Planes de desarrollo de carrera y programas de mentoría para ayudarte a dar forma a tu trayectoria. - Celebraciones y Soporte: Recompensas por días especiales para celebrar cumpleaños, aniversarios laborales y otros hitos personales. Equipamiento proporcionado por la empresa. - Opciones de trabajo flexible para ayudarte a lograr el equilibrio adecuado. - Otros beneficios pueden variar según tu ubicación en LATAM. Para obtener información detallada sobre los beneficios aplicables a tu ubicación específica, consulta con uno de nuestros reclutadores. Acerca de Blend: Blend es un proveedor líder de servicios de IA, comprometido a co-crear un impacto significativo para sus clientes a través del poder de la ciencia de datos, la IA, la tecnología y las personas. Con la misión de impulsar visiones audaces, Blend aborda desafíos importantes alineando a la perfección la experiencia humana con la inteligencia artificial. La empresa se dedica a desbloquear valor y fomentar la innovación para sus clientes aprovechando personas de clase mundial y una estrategia basada en datos. Creemos que el poder de las personas y la IA puede tener un impacto significativo en tu mundo, creando un trabajo y proyectos más gratificantes para nuestra gente y clientes. Para más información, visita www.blend360.com Estamos buscando un Data Quality Engineer para contribuir a nuestro próximo nivel de crecimiento y expansión.

Responsabilidades

• Diseñar e implementar un framework de calidad de datos
• Construir y mantener validaciones automatizadas en pipelines Databricks
• Validar la identidad de resolución en la capa Silver
• Realizar pruebas end-to-end de pipelines
• Colaborar con Data Engineers para definir criterios de aceptación
• Soportar UAT con stakeholders de negocio
• Documentar procesos QA, resultados y hallazgos de calidad de datos
• Monitorear la salud de los pipelines post-despliegue

Skills requeridas

Beneficios

• Oportunidades de aprendizaje
• Certificaciones (AWS, Databricks, Snowflake)
• Acceso a Udemy Business
• Clases de inglés
• Oportunidades de viaje
• Planes de carrera y mentoría
• Recompensas por días especiales
• Equipamiento proporcionado por la empresa
• Opciones de trabajo flexible

Trabajos similares

Más ofertas de Blend360