Categorías
···
Entrar / Registro
Resumen: Mercor busca un evaluador de IA en física para perfeccionar y evaluar las respuestas generadas por modelos de lenguaje grande (LLM) en contextos físicos, centrándose en su precisión conceptual y calidad del razonamiento. Aspectos destacados: 1. Evaluar las respuestas generadas por modelos de lenguaje grande (LLM) a consultas de física en cuanto a su precisión y calidad del razonamiento 2. Realizar verificaciones de hechos utilizando fuentes autorizadas y conocimientos especializados en la materia 3. Annotar las respuestas de los modelos para identificar sus fortalezas y áreas que requieren mejora **Acerca del puesto** **Mercor** conecta talento creativo y técnico de élite con laboratorios líderes en investigación de IA. Con sede central en San Francisco, nuestros inversores incluyen a **Benchmark**, **General Catalyst**, **Peter Thiel**, **Adam D'Angelo**, **Larry Summers** y **Jack Dorsey**. **Puesto:** Evaluador de IA en física **Tipo:** **Trabajo por contrato a tiempo completo o parcial** **Remuneración:** **73 $/hora** **Ubicación:** **EE. UU., Reino Unido, Canadá, UE** **Responsabilidades del puesto** * Redactar y perfeccionar indicaciones (prompts) para orientar el comportamiento del modelo en contextos físicos. * Evaluar las respuestas generadas por modelos de lenguaje grande (LLM) a consultas relacionadas con la física en cuanto a su precisión conceptual y calidad del razonamiento. * Realizar verificaciones de hechos utilizando fuentes públicas autorizadas y conocimientos especializados en la materia. * Annotar las respuestas de los modelos identificando sus fortalezas y áreas de mejora. * Evaluar la claridad, estructura y adecuación de las explicaciones para distintos públicos. * Aplicar criterios de evaluación consistentes siguiendo taxonomías y referencias claras. **Requisitos** **Imprescindibles** * **Doctorado en Física o en un campo estrechamente relacionado**. * Conocimientos profundos en **Mecánica clásica y dinámica**, **Electromagnetismo**, **Termodinámica**, **Física cuántica** o **Relatividad**. * Experiencia significativa en el uso de **modelos de lenguaje grande (LLM)**. * **Excelentes habilidades de redacción** y capacidad para explicar conceptos complejos de física. * **Gran atención al detalle** y experiencia revisando textos técnicos. **Deseables** * Experiencia con **RLHF**, evaluación de modelos o trabajo de anotación de datos. * Experiencia docente o en la explicación de conceptos físicos a no especialistas. * Conocimiento de rúbricas de evaluación o marcos estructurados de revisión. **Proceso de solicitud (tarda entre 20 y 30 minutos en completarse)** * Subir el currículum * Entrevista con IA basada en su currículum * Enviar el formulario **Recursos y soporte** * Para obtener más información sobre el proceso de entrevista y detalles acerca de la plataforma, visite: https://talent.docs.mercor.com/welcome/welcome * Para cualquier ayuda o soporte, contacte con: support@mercor.com *Nota al pie: Nuestro equipo revisa las solicitudes diariamente. Por favor, complete su entrevista con IA y los pasos de la solicitud para ser considerado para esta oportunidad.*
