Home
Mercor

AI Evaluation Rubric Reviewer

  • Compenso: da 40 USD a 75 USD / ora
  • Contratto: Freelance
  • Chi può candidarsi: Aperta in tutto il mondo
  • Pubblicata il 16 nov 2026

In breve

Tu guadagni da 40 a 75 USD all'ora lavorando a distanza, con un contratto freelance. Il compito è testare agenti IA su attività realistiche di shopping e consegne, e decidere se i loro errori sono equi. Se ami i dettagli e la scrittura precisa, questa missione può fare al caso tuo.

Cosa farai

  • Controlli i compiti scritti dall'IA, con il prompt e la griglia di valutazione.
  • Verifichi se l'informazione era davvero disponibile e se la griglia giudica ciò che il prompt chiedeva.
  • Sistemi i criteri non equi e segnali i compiti che non si possono salvare.
  • Scrivi una breve nota su ogni decisione che prendi.

Cosa ti serve per candidarti

  • Esperienza concreta nella scrittura o revisione di rubriche per valutazioni di LLM.
  • Elenca i tuoi progetti già nella candidatura.
  • Sai leggere una lunga trascrizione di agente e trovare il punto in cui sbaglia.
  • Scrivi in modo preciso e controlli i dati invece di fidarti della risposta di riferimento.

Chi può candidarsi

Possono candidarsi persone da tutto il mondo, perché non è indicata nessuna restrizione per paese. Il contratto è freelance, il lavoro è a distanza e i posti disponibili sono 10.

Il consiglio di Romowork

Noi ti consigliamo di mettere in cima alla candidatura i progetti di rubriche che hai già seguito, con esempi chiari di cosa hai corretto.

Pubblicata originariamente su Mercor

Offerte simili

Mercor

Scientific / ML Engineer

Compenso: da 90 USD a 140 USD / ora

  • Contratto: Part time
  • Chi può candidarsi: Stati Uniti

Pubblicata il 9 nov 2026

Mercor

Esperto di Analisi dei Dati

Compenso: da 70 USD a 120 USD / ora

  • Contratto: Part time
  • Chi può candidarsi: Aperta in tutto il mondo

Pubblicata il 15 set 2026

Mercor

Esperto di Machine Learning

Compenso: da 70 USD a 120 USD / ora

  • Contratto: Part time
  • Chi può candidarsi: Aperta in tutto il mondo

Pubblicata il 15 set 2026