AI Operations Specialist - LLM & Conversation Systems

Especialista en Operaciones de IA – Sistemas de Conversación y LLM

Tipo de puesto: Jornada completa, Remoto

Horario de trabajo: Horario comercial de EE. UU.

Sobre el rol

Buscamos un Especialista en Operaciones de IA práctico para gestionar y mejorar nuestros sistemas de conversación de IA en producción. Somos una plataforma de recuperación de leads por SMS impulsada por IA que atiende a marcas de telemedicina, procesando millones de mensajes cada mes. Nuestros sistemas de IA interactúan directamente con los clientes, y su rendimiento impacta directamente en las conversiones de los clientes. En este rol, incorporarás nuevos clientes, configurarás sistemas de conversación de IA, monitorearás conversaciones en vivo, diagnosticarás problemas, mejorarás prompts y el comportamiento del sistema, y medirás si tus cambios realmente mejoran la conversión. Este no es un rol teórico de IA. Buscamos a alguien que haya operado sistemas LLM en producción y entienda cómo monitorearlos, solucionar problemas, probarlos y mejorarlos continuamente.

Responsabilidades

Onboarding de Clientes y Configuración de IA

• Incorporar nuevos clientes a la plataforma de conversación de IA.
• Configurar integraciones de webhooks y bases de conocimiento de clientes.
• Configurar campañas y flujos de trabajo de conversación.
• Asegurar que los sistemas de nuevos clientes se prueben adecuadamente antes de salir en vivo.
• Solucionar problemas de integración y configuración durante el onboarding.

Operaciones de IA en Producción

• Monitorear conversaciones generadas por IA en vivo e interacciones de clientes.
• Revisar conversaciones para identificar errores, inconsistencias y oportunidades perdidas.
• Diagnosticar modos de falla de IA y determinar sus causas raíz.
• Identificar problemas que afectan la calidad de la conversación y la conversión.
• Escalar problemas técnicos cuando sea necesario y hacer seguimiento hasta su resolución.

Optimización de Prompts y Sistemas

• Escribir, editar y mejorar prompts que generen mensajes dirigidos a clientes.
• Ajustar instrucciones del sistema y lógica de conversación según el rendimiento en el mundo real.
• Probar cambios sistemáticamente antes y después del despliegue.
• Mantener documentación de los cambios de prompts y sistemas.
• Mejorar continuamente el comportamiento de la IA manteniendo la precisión y la consistencia.

Análisis de Rendimiento y Conversión

• Analizar transcripciones de conversaciones y datos de rendimiento.
• Medir si los cambios en el sistema y los prompts mejoran la conversión.
• Identificar patrones en las conversaciones que puedan informar futuras mejoras.
• Rastrear resultados clave de rendimiento y comunicar hallazgos a la dirección.
• Utilizar datos e interacciones reales de clientes para guiar las decisiones de optimización.

Colaboración con el Fundador

• Trabajar directamente con el fundador en las operaciones diarias de IA y mejoras.
• Comunicar problemas, hallazgos y recomendaciones de forma clara.
• Asumir la responsabilidad de los problemas desde la identificación hasta la resolución.
• Moverse rápidamente manteniendo altos estándares para la salida de IA dirigida a clientes.

Experiencia y Habilidades Requeridas

Imprescindible

• Experiencia comprobada operando sistemas LLM o de IA en producción.
• Experiencia práctica monitoreando y mejorando salidas de IA en producción.
• Experiencia con prompt engineering y optimización de prompts de sistema.
• Fuerte comprensión del comportamiento de los LLM, modos de falla y pruebas iterativas.
• Experiencia analizando conversaciones generadas por IA o salidas dirigidas a clientes.
• Capacidad para trabajar con webhooks, APIs, bases de conocimiento o integraciones similares.
• Sólidas habilidades analíticas y de resolución de problemas.
• Excelente inglés escrito – requerido para editar mensajes de IA dirigidos a clientes y documentar cambios en el sistema.
• Fuerte atención al detalle.
• Capacidad para trabajar de forma independiente y asumir la responsabilidad de los sistemas de producción.

Qué te hace un buen candidato

• Que hayas operado sistemas de IA en producción en lugar de solo experimentar con ChatGPT.
• Que te sientas cómodo revisando cientos o miles de interacciones de IA para identificar patrones y problemas.
• Que pienses en términos de resultados y conversión, no solo si la respuesta de la IA suena bien.
• Que seas metódico al probar cambios y medir su impacto.
• Que puedas identificar rápidamente por qué un sistema de IA se está comportando incorrectamente y determinar cómo mejorarlo.
• Que te comuniques claramente y documentes tu trabajo a fondo.
• Que disfrutes trabajando directamente con un fundador en un entorno de ritmo rápido.

Cómo es un día típico

Comenzarás revisando el rendimiento de las conversaciones de IA en vivo y buscando patrones inusuales, fallas u oportunidades de mejora. Podrías pasar parte del día incorporando un nuevo cliente de telemedicina, configurando su base de conocimiento e integraciones, y estableciendo sus campañas. También revisarás transcripciones de conversaciones, identificarás problemas con las respuestas de la IA, actualizarás prompts o instrucciones del sistema, probarás tus cambios y monitorearás el rendimiento de conversión resultante. A lo largo del día, trabajarás directamente con el fundador para discutir hallazgos, priorizar mejoras y asegurarte de que los sistemas de producción continúen funcionando eficazmente.

Proceso de entrevista

• Selección inicial de reclutador
• Entrevista con el cliente
• Etapa de oferta

#LI-AG1