Startseite
Mercor

AI Evaluation Rubric Auditor

  • Vergütung: 60 $ bis 85 $ / Stunde
  • Vertrag: Freiberuflich
  • Wer sich bewerben kann: Kanada, Vereinigte Staaten, Argentinien +10
  • Veröffentlicht am 16. Nov. 2026

Kurz gesagt

Zwischen 60 und 85 USD pro Stunde verdienen Sie bei dieser Mission, komplett remote im Freelance-Vertrag. Sie prüfen, ob KI-Agenten fair bewertet werden. Perfekt, wenn Sie gern genau hinschauen und Fehler aufspüren.

Ihre Aufgaben

  • Sie prüfen komplette Aufgaben, bestehend aus Prompt und Bewertungsraster.
  • Sie kontrollieren, ob Fehler im Raster fair sind: War die Information verfügbar? Bewertet das Raster genau das, was gefragt wurde?
  • Sie erkennen, ob eine richtige Antwort fälschlich als falsch markiert wurde.
  • Sie geben den Reviewern konkretes Feedback zu Problemen in Prompts und Rastern.

Das brauchen Sie für die Bewerbung

  • Umfangreiche Erfahrung beim Schreiben oder Prüfen von Rubriken für LLM-Evaluierungen. Ihre Projekte listen Sie in der Bewerbung auf.
  • Erfahrung darin, Autoren oder Reviewer mit Feedback zu begleiten.
  • Sie können lange Transkripte von KI-Agenten lesen und die Stelle finden, an der etwas schiefgeht.
  • Präzises Schreiben und die Bereitschaft, Daten zu checken, statt der Referenzantwort blind zu vertrauen.
  • Regelmäßige Verfügbarkeit.

Wer sich bewerben kann

Bewerben können sich Personen mit Wohnsitz in CA, US, AR, BO, BR, CL, CO, EC, GY, PY, PE, UY oder GB.

Ein Tipp von Romowork

Listen Sie in Ihrer Bewerbung Ihre Rubrik-Projekte konkret auf, denn genau danach wird gefragt. Wir empfehlen, dabei klar zu zeigen, welche Rolle Sie dort hatten.

Ursprünglich veröffentlicht auf Mercor

Ähnliche Angebote

micro1

Junior-Ingenieur für Machine Learning

Vergütung: 60 $ bis 120 $ / Stunde

  • Vertrag: Freiberuflich
  • Wer sich bewerben kann: Weltweit offen

Veröffentlicht am 12. Nov. 2026

SME Careers by SuperAnnotate

Document Annotation Specialist (PDF)

Vergütung: 3 $ bis 10 $ / Stunde

  • Vertrag: Freiberuflich
  • Wer sich bewerben kann: Indonesien, Philippinen, Pakistan +3

Veröffentlicht am 10. Nov. 2026

micro1

AI-Trainer (ML Engineering)

Vergütung: 60 $ bis 120 $ / Stunde

  • Vertrag: Freiberuflich
  • Wer sich bewerben kann: Weltweit offen

Veröffentlicht am 9. Nov. 2026

micro1

Open-Source-Beitragender

Vergütung: 60 $ bis 120 $ / Stunde

  • Vertrag: Freiberuflich
  • Wer sich bewerben kann: Weltweit offen

Veröffentlicht am 8. Nov. 2026