Home
Mercor

SWE-Bench Task Auditor

  • Compenso: da 70 USD a 90 USD / ora
  • Contratto: Freelance
  • Chi può candidarsi: Stati Uniti
  • Pubblicata il 28 ago 2026

In breve

Paga da 70 a 90 USD all'ora, da casa, con un contratto freelance. Tu valuti la qualità di compiti di ingegneria del software usati per addestrare e testare i modelli di un laboratorio AI di punta. Se conosci bene il codice open source, qui ci sono 3 posti disponibili.

Cosa farai

  • Valuti qualità, correttezza e riproducibilità dei compiti di benchmark di ingegneria del software.
  • Analizzi repository complete, patch di riferimento e test harness.
  • Controlli l'integrità della valutazione e individui fughe di risposte o tentativi di reward hacking.
  • Scrivi feedback chiari e precisi, basati su una griglia di valutazione.

Cosa ti serve per candidarti

  • Almeno 3 anni di esperienza professionale in ingegneria del software.
  • Contributi reali a progetti open source, come PR unite o ruoli di committer o maintainer.
  • Capacità di verificare patch, test runner e isolamento Docker.
  • Padronanza di Python e di almeno uno tra Java, Go, TypeScript o C++.

Chi può candidarsi

Possono candidarsi i residenti negli Stati Uniti.

Il consiglio di Romowork

Noi consigliamo di mettere in evidenza i link alle tue PR unite e qualsiasi esperienza con SWE-Bench, perché è proprio ciò che cercano.

Pubblicata originariamente su Mercor

Offerte simili

micro1

Direttore Ingegneria, Piattaforme Interne

Compenso: da 450.000 USD a 800.000 USD / anno

  • Contratto: Tempo pieno
  • Chi può candidarsi: Aperta in tutto il mondo

Pubblicata il 12 nov 2026

micro1

Ingegnere Software Full-Stack Senior

Compenso: da 50 USD a 100 USD / ora

  • Contratto: Freelance
  • Chi può candidarsi: Aperta in tutto il mondo

Pubblicata il 11 nov 2026