




Resumen: Buscamos expertos técnicamente hábiles para evaluar y mejorar cómo razonan, actúan y se comunican los asistentes de programación con IA durante los flujos de trabajo de desarrollo mediante la revisión de transcripciones. Aspectos destacados: 1. Dar forma al futuro de los sistemas de IA que asisten a los desarrolladores 2. Colaboración flexible basada en tareas 3. Puesto remoto; completable según su propio horario Colaboramos con una organización líder en investigación sobre IA para evaluar y mejorar cómo razonan, actúan y se comunican los asistentes de programación con IA durante los flujos de trabajo de desarrollo. Buscamos expertos técnicamente hábiles (especialmente aquellos con experiencia en revisiones de código, pruebas o documentación) para evaluar transcripciones completas de conversaciones entre usuarios y asistentes de programación con IA. Esta colaboración a corto plazo contribuye a dar forma al futuro de los sistemas de IA que asisten a los desarrolladores. Responsabilidades clave * Revisar transcripciones extensas entre usuarios y asistentes de programación con IA * Analizar detalladamente la lógica, la ejecución y las acciones declaradas por la IA * Calificar cada transcripción utilizando una rúbrica de 10 puntos aplicada a múltiples criterios * Opcionalmente redactar breves justificaciones citando ejemplos extraídos del diálogo * Detectar discrepancias entre las afirmaciones y las acciones (por ejemplo, decir "Ejecutaré las pruebas" sin hacerlo) Cualificaciones ideales Principales candidatos: * Ingenieros senior o staff con amplia experiencia en revisiones de código e intuición práctica sobre su ejecución * Ingenieros de QA con sólidos hábitos de verificación y comprobación de coherencia * Redactores técnicos o especialistas en documentación capacitados para comparar instrucciones frente a su implementación También son candidatos muy adecuados: * Desarrolladores backend o full-stack cómodos con llamadas a funciones, APIs y flujos de pruebas * Profesionales DevOps o SRE familiarizados con la orquestación de herramientas y el análisis del comportamiento de los sistemas Lenguajes y herramientas: * Sería útil tener dominio de Python (la mayoría de las transcripciones están basadas en Python) * Es un plus conocer otros lenguajes como JavaScript, TypeScript, Java, C\+\+, Go, Ruby, Rust o Bash * Resulta valioso sentirse cómodo con flujos de trabajo de Git, frameworks de pruebas y herramientas de depuración Más información sobre esta oportunidad * Debe completar cada lote de transcripciones dentro de las 5 horas posteriores al inicio (no hay límite en la cantidad de tareas disponibles) * Colaboración flexible basada en tareas, con posibilidad de recibir lotes recurrentes Proceso de solicitud * Envíe su currículum para comenzar * Si es seleccionado, recibirá la documentación de la rúbrica y acceso a la plataforma de evaluación * La mayoría de los solicitantes reciben una respuesta en pocos días hábiles Valoramos a todos los solicitantes calificados sin considerar características legalmente protegidas y ofrecemos adaptaciones razonables bajo solicitud. **Términos contractuales y de pago** ------------------------------ * Trabajará como contratista independiente. * Se trata de un puesto completamente remoto que puede realizarse según su propio horario. * Los proyectos pueden ampliarse, acortarse o finalizarse anticipadamente según las necesidades y el desempeño. * Su trabajo no implicará acceso a información confidencial ni propiedad intelectual de ningún empleador, cliente o institución. * Los pagos se realizan semanalmente mediante Stripe o Wise, según los servicios prestados.


