Inicio
Mercor

AI Evaluation Rubric Auditor

  • Remuneración: de 60 US$ a 85 US$ / hora
  • Contrato: Freelance
  • Quién puede postular: Canadá, Estados Unidos, Argentina +10
  • Publicada el 16 nov 2026

En resumen

¿Te gusta encontrar el fallo donde nadie mira? Esta misión a distancia con contrato freelance paga 60 a 85 USD por hora. Tú revisarías si las rúbricas de otros evaluadores de IA califican de forma justa.

Lo que harás

  • Auditas tareas completas: el prompt y su rúbrica de calificación.
  • Compruebas si la información necesaria estaba disponible para responder.
  • Revisas si la rúbrica premia lo que el prompt pedía y si una respuesta válida podría salir mal.
  • Das feedback a los revisores sobre problemas en prompts y rúbricas.

Lo que necesitas para postular

  • Experiencia real escribiendo o revisando rúbricas para evaluaciones de LLM, con tus proyectos listados en la candidatura.
  • Experiencia dando feedback a redactores o revisores.
  • Disponibilidad constante.
  • Capacidad para leer transcripciones largas de agentes y detectar dónde se equivocaron, con redacción precisa y datos verificados en lugar de fiarte de la respuesta de referencia.

Quién puede postular

Pueden postularse residentes de CA, US, AR, BO, BR, CL, CO, EC, GY, PY, PE, UY o GB. Hay 10 puestos disponibles.

El consejo de Romowork

Enumera tus proyectos de rúbricas con detalle en la candidatura, porque es lo primero que se pide. Nosotros te recomendamos explicar con ejemplos concretos cómo detectaste un error de calificación.

Publicada originalmente en Mercor

Ofertas similares

SME Careers by SuperAnnotate

Document Annotation Specialist (PDF)

Remuneración: de 3 US$ a 10 US$ / hora

  • Contrato: Freelance
  • Quién puede postular: Indonesia, Filipinas, Pakistán +3

Publicada el 10 nov 2026

micro1

Colaborador/a de Código Abierto

Remuneración: de 60 US$ a 120 US$ / hora

  • Contrato: Freelance
  • Quién puede postular: Abierta a todo el mundo

Publicada el 8 nov 2026