Home
Mercor

AI Evaluation Rubric Auditor

  • Compenso: da 60 USD a 85 USD / ora
  • Contratto: Freelance
  • Chi può candidarsi: Canada, Stati Uniti, Argentina +10
  • Pubblicata il 16 nov 2026

In breve

Guadagni da 60 a 85 USD all'ora con un contratto freelance, tutto da remoto. Ti serve per controllare il lavoro di chi valuta gli agenti IA, quindi è perfetto se ami i dettagli e non ti fidi della prima risposta.

Cosa farai

  • Controlli interi compiti, con il prompt e la griglia di valutazione, per capire se gli errori segnalati sono giusti.
  • Verifichi se l'informazione era davvero disponibile e se la griglia valuta ciò che il prompt chiedeva.
  • Individui le risposte valide che sarebbero state segnate come sbagliate, e la struttura della griglia se non rispetta le linee guida.
  • Dai feedback ai revisori sui problemi di prompt e griglia, leggendo lunghe trascrizioni per trovare dove l'agente ha sbagliato strada.

Cosa ti serve per candidarti

  • Esperienza solida nella scrittura o revisione di griglie di valutazione per valutazioni di LLM.
  • Elenco dei progetti già svolti da inserire nella candidatura.
  • Esperienza nel dare feedback a autori o revisori.
  • Disponibilità costante durante la durata del contratto.
  • Scrittura precisa e verifica dei dati, senza fidarti ciecamente della risposta di riferimento.

Chi può candidarsi

Puoi candidarti se risiedi in CA, US, AR, BO, BR, CL, CO, EC, GY, PY, PE, UY o GB. Ci sono 10 posti disponibili.

Il consiglio di Romowork

Noi ti consigliamo di elencare nella candidatura ogni progetto di griglie che hai già scritto o revisionato, con il dettaglio di cosa hai fatto.

Pubblicata originariamente su Mercor

Offerte simili

micro1

Ingegnere junior di machine learning

Compenso: da 60 USD a 120 USD / ora

  • Contratto: Freelance
  • Chi può candidarsi: Aperta in tutto il mondo

Pubblicata il 12 nov 2026

SME Careers by SuperAnnotate

Document Annotation Specialist (PDF)

Compenso: da 3 USD a 10 USD / ora

  • Contratto: Freelance
  • Chi può candidarsi: Indonesia, Filippine, Pakistan +3

Pubblicata il 10 nov 2026

micro1

Addestratore AI (Ingegneria ML)

Compenso: da 60 USD a 120 USD / ora

  • Contratto: Freelance
  • Chi può candidarsi: Aperta in tutto il mondo

Pubblicata il 9 nov 2026

micro1

Collaboratore Open Source

Compenso: da 60 USD a 120 USD / ora

  • Contratto: Freelance
  • Chi può candidarsi: Aperta in tutto il mondo

Pubblicata il 8 nov 2026