Inicio
Mercor

Auditor de tareas de SWE-Bench

  • Remuneración: de 70 US$ a 90 US$ / hora
  • Contrato: Freelance
  • Quién puede postular: Estados Unidos
  • Publicada el 28 ago 2026

En resumen

Tu misión: revisar tareas de benchmarks de ingeniería de software que sirven para entrenar y evaluar modelos de IA de punta. Ganas entre 70 y 90 USD por hora desde casa, con contrato freelance. Ideal si te gusta auditar código y tienes ojo para los detalles.

Lo que harás

  • Evalúas la calidad, la exactitud y la reproducibilidad de tareas de benchmarks de ingeniería de software.
  • Revisas tareas a nivel de repositorio, parches de referencia y arneses de pruebas.
  • Verificas que la calificación sea justa y que nadie pueda hacer trampa con las respuestas.
  • Escribes comentarios claros y bien fundamentados, basados en rúbricas.

Lo que necesitas para postular

  • 3 años de experiencia profesional en ingeniería de software.
  • Contribuciones reales a proyectos open source, como PRs fusionados o roles de committer o maintainer.
  • Capacidad para auditar parches, ejecutores de pruebas y aislamiento con Docker, y detectar fugas de respuestas.
  • Dominio de Python y de al menos uno entre Java, Go, TypeScript o C++.

Quién puede postular

Puedes postular si vives en Estados Unidos. Hay 3 puestos disponibles bajo contrato freelance y en modalidad remota.

El consejo de Romowork

Nosotros te recomendamos destacar tus PRs fusionados y cualquier experiencia en revisión de código o calificación de tareas, porque esos detalles pesan mucho en esta oferta.

Publicada originalmente en Mercor

Ofertas similares

micro1

Director de Ingeniería, Plataformas Internas

Remuneración: de 450.000 US$ a 800.000 US$ / año

  • Contrato: Tiempo completo
  • Quién puede postular: Abierta a todo el mundo

Publicada el 12 nov 2026

micro1

Ingeniero de Software Full-Stack Sénior

Remuneración: de 50 US$ a 100 US$ / hora

  • Contrato: Freelance
  • Quién puede postular: Abierta a todo el mundo

Publicada el 11 nov 2026