Project Manager, Applied AI

Se busca Project Manager para liderar iniciativas de recolección de datos multilingües y evaluación de modelos de lenguaje a gran escala en un entorno de producción de IA.

Descripción del puesto

Estamos buscando un Project Manager con enfoque en datos para liderar nuestras iniciativas de recolección de datos multilingües a gran escala y evaluación de modelos de lenguaje grandes (LLM). En este rol, serás el soporte operativo de nuestro desarrollo de IA, coordinando equipos globales de anotadores y especialistas en datos. En un entorno dinámico donde puedas optimizar flujos de trabajo para productividad, calidad y rendimiento, ¡queremos escucharte! Responsabilidades clave: - Gestión de proyectos: - Entrega de extremo a extremo: Gestionar el ciclo de vida completo de proyectos de datos de IA, desde la definición del alcance y la creación de pautas hasta la entrega de datos y el análisis post-mortem. - Gestión de pipeline: Supervisar pipelines de datos a gran escala para recolección de datos multilingües (audio, texto, imagen) y evaluación de LLM (RLHF, SFT, clasificación y pruebas de seguridad). - Aseguramiento de la calidad y monitoreo del rendimiento: - Seguimiento de KPI: Monitorear y reportar rigurosamente indicadores clave de rendimiento, incluyendo: - Rendimiento: Volumen de datos procesados por hora/día. - Calidad: Puntuaciones de precisión, Acuerdo Inter-Anotador (IAA) y rendimiento de conjunto de oro. - Productividad: Costo por tarea y tasas de eficiencia del trabajador. - Control de calidad: Realizar ciclos de control de calidad, análisis de causa raíz para caídas de calidad y capacitación correctiva para grupos de anotadores. - Paneles de control: Mantener paneles de control para visualizar la salud del proyecto y señalar cuellos de botella en tiempo real. - Gestión de partes interesadas: - Coordinación global: Gestionar relaciones con expertos en datos y grupos de trabajo, asegurando el cumplimiento de los SLA en cuanto a matices localizados y precisión lingüística. - Colaboración interfuncional: Coordinar con equipos de Operaciones Técnicas de IA Aplicada. Traducir requisitos técnicos en pautas claras y accionables para anotadores no técnicos. - Ciclos de retroalimentación: Facilitar ciclos de retroalimentación continua donde los conocimientos de datos impulsen actualizaciones de las pautas de anotación y las estrategias de ajuste fino del modelo. Calificaciones: Habilidades y experiencia esenciales: - Experiencia: 3-5 años de experiencia en gestión de proyectos, específicamente en operaciones de datos de IA/ML. - Conocimiento de LLM: Fuerte comprensión de los procesos de entrenamiento de LLM (pre-entrenamiento, SFT, RLHF) y metodologías de evaluación (humano en el ciclo, equipo rojo). - Competencia en datos: Dominio avanzado de Excel/ Google Sheets; capacidad para escribir consultas SQL para extraer y analizar datos de rendimiento. - Metodología: Historial comprobado de uso de metodologías Agile, Scrum o Kanban para gestionar flujos de trabajo complejos. - Comunicación: Capacidad excepcional para escribir pautas claras y no ambiguas para audiencias multilingües. Calificaciones preferenciales (bueno tener): - Multilingüe: La fluidez en un segundo idioma es altamente deseable. - Herramientas técnicas: Experiencia con plataformas de anotación de datos (por ejemplo, Scale AI, Super Anotar) y herramientas de gestión de proyectos (por ejemplo, Jira). - Educación: Antecedentes en Ingeniería de ML, Ciencias de la Computación, Ciencias de Datos y capacitación en gestión de proyectos. LILT está cambiando cómo el mundo se comunica — y liderando esa transformación. La misión de LILT es hacer que la información del mundo esté disponible para todos, sin importar el idioma que hablen. Únete a nuestra comunidad global que prospera en innovación y excelencia. Nuestro conocimiento colectivo, unicidad y habilidades brindan servicios de IA multilingües y verificados por humanos a empresas, gobiernos y desarrolladores de IA en todo el mundo. Gana dinero. Diviértete. Avanza el conocimiento humano. Trabaja en proyectos diversos desde cualquier lugar, en cualquier momento que quieras. Recibe pago de manera rápida y justa, y construye tu red profesional en una comunidad de apoyo, todo a través de un proceso de solicitud simplificado adaptado a tu experiencia. La información recolectada y procesada como parte de tu proceso de solicitud, incluidas las solicitudes de trabajo que elijas presentar, está sujeta a la Política de Privacidad de LILT en https://lilt.com/legal/privacy. En LILT, estamos comprometidos con un proceso de contratación justo, inclusivo y transparente. Como parte de nuestros esfuerzos de reclutamiento, podemos utilizar inteligencia artificial (IA) y herramientas automatizadas para ayudar en la evaluación de solicitudes, incluida la detección de currículums, la evaluación de habilidades y el análisis de entrevistas. Estas herramientas están diseñadas para respaldar la toma de decisiones humanas y ayudarnos a identificar candidatos calificados de manera eficiente y objetiva. Todas las decisiones finales de contratación las toman personas. Si tienes alguna inquietud, necesitas adaptaciones o deseas optar por no participar en el uso de IA en nuestro proceso de contratación, por favor házmelo saber en [email protected]. LILT es un empleador con igualdad de oportunidades. Extendemos igualdad de oportunidades a todos los individuos sin considerar la raza, religión, color, origen nacional, ascendencia, sexo, orientación sexual, identidad de género, edad, discapacidad física o mental, condición médica, características genéticas, estatus de veterano o estado civil, embarazo o cualquier otra clasificación protegida por leyes federales, estatales o locales aplicables. Estamos comprometidos con los principios del empleo justo y la eliminación de todas las prácticas discriminatorias.

Responsabilidades

• Gestión de proyectos de IA
• Monitoreo de KPI
• Control de calidad
• Gestión de partes interesadas

Skills requeridas

Trabajos similares

Más ofertas de Lilt Production