Quality Evaluator – Fluent English

EVALUADOR DE CALIDAD – INGLÉS

Ayuda a dar forma al futuro de la IA evaluando y comparando respuestas de modelos de IA avanzados.

• Ubicación: Remoto
• Tipo: Contratista independiente / Tiempo parcial
• Compromiso: Hasta 3 meses
• Compensación: $7-$12/hora

SOBRE EL PUESTO

En Anyone AI, creamos datos de entrenamiento y evaluación de alta calidad para modelos de IA de vanguardia.

Buscamos expertos con fluidez en inglés, sólidas habilidades de escritura, pensamiento crítico y amplia experiencia práctica con modelos de lenguaje de gran tamaño (LLMs).

En este rol, interactuarás directamente con modelos de IA y compararás sus respuestas lado a lado para determinar cuál satisface mejor las necesidades del usuario. Tus evaluaciones y explicaciones escritas ayudarán a mejorar la precisión, utilidad y confiabilidad de los sistemas de IA.

QUÉ HARÁS

• Interactuar con diferentes modelos y herramientas de IA en una amplia gama de prompts y temas.
• Comparar dos o más respuestas generadas por IA lado a lado.
• Evaluar precisión, utilidad, seguimiento de instrucciones, claridad y calidad general de la respuesta.
• Seguir pautas detalladas de calificación y flujos de trabajo de evaluación en múltiples pasos.
• Escribir explicaciones claras y bien fundamentadas que respalden tus decisiones de evaluación.
• Aplicar criterios de evaluación de forma consistente en todas las tareas.

BUSCAMOS

• Fluidez en inglés, con sólida comprensión lectora y habilidades de escritura.
• Amplia experiencia práctica usando LLMs y evaluando críticamente sus salidas.
• Buen juicio analítico y capacidad para ponderar múltiples dimensiones de la calidad de la respuesta.
• Excelente atención al detalle y capacidad para seguir instrucciones complejas con precisión.
• Capacidad para explicar clara y convincentemente las decisiones de evaluación.
• Comodidad para cambiar entre modelos de IA, herramientas y flujos de trabajo en múltiples pasos.

CONVENIENTE TENER

• Experiencia previa en evaluación de respuestas de IA, anotación de datos o aseguramiento de calidad.
• Experiencia en edición, investigación, verificación de hechos o escritura analítica.
• Familiaridad con rúbricas de evaluación y tareas de comparación lado a lado.