Resumen: Colabora con equipos líderes en IA para mejorar la calidad, utilidad y fiabilidad de los sistemas generales de IA conversacional mediante la evaluación y refinamiento de conceptos de ingeniería. Aspectos destacados: 1. Oportunidad de influir en la calidad y fiabilidad de la IA en contextos de ingeniería 2. Interacción con sistemas de IA conversacional de vanguardia 3. Aplicación de una profunda experiencia en ingeniería a problemas complejos de IA **Modalidad de trabajo:** Teletrabajo **Tipo de colaboración:** Contratista independiente **Horario:** Contrato a tiempo completo o a tiempo parcial **Requisito lingüístico:** Inglés fluido **Función:** Colabora con equipos líderes en IA para mejorar la calidad, utilidad y fiabilidad de los sistemas generales de IA conversacional. Estos sistemas se utilizan en una amplia variedad de escenarios cotidianos y profesionales, y su eficacia depende de la claridad, precisión y utilidad con que responden a las preguntas reales de los usuarios. En contextos relacionados con la ingeniería, los sistemas de IA conversacional deben demostrar un razonamiento aplicado preciso, una precisión cuantitativa y una resolución práctica de problemas alineada con sistemas del mundo real. Este proyecto se centra en evaluar y mejorar cómo los modelos razonan sobre conceptos de ingeniería y los explican en múltiples disciplinas. **Sus responsabilidades** * **Redactar y refinar indicaciones** para guiar el comportamiento del modelo en escenarios de ingeniería * **Evaluar las respuestas generadas por modelos de lenguaje grande (LLM)** a consultas relacionadas con la ingeniería, en cuanto a su exactitud técnica, razonamiento aplicado y exhaustividad * **Realizar verificaciones de hechos y confirmar cualquier afirmación técnica** utilizando fuentes públicas autorizadas y conocimientos especializados en la materia * **Annotar las respuestas del modelo**, identificando sus puntos fuertes, áreas de mejora y errores factuales o conceptuales * **Evaluar la claridad, estructura y adecuación de las explicaciones** para distintos públicos * Garantizar que **las respuestas del modelo se alineen con el comportamiento conversacional esperado** y con las directrices del sistema * **Aplicar criterios de evaluación consistentes**, siguiendo taxonomías claras, referencias comparativas y pautas detalladas de evaluación **Perfil deseado** * Posee un **doctorado en Ingeniería o en un campo estrechamente relacionado** * Cuenta con una profunda experiencia en **uno o más de los siguientes subdominios**: + Ingeniería de sistemas mecánicos y físicos + Ingeniería eléctrica, electrónica y de computación + Ingeniería química, de materiales y de procesos + Ingeniería civil, ambiental e infraestructural * Tiene **una experiencia significativa en el uso de modelos de lenguaje grande (LLM)** y comprende cómo y por qué las personas los utilizan * Posee **excelentes habilidades de redacción**, capaz de explicar con claridad conceptos complejos de ingeniería * Tiene una **gran atención al detalle**, detectando sistemáticamente matices que otros podrían pasar por alto * **Experiencia previa en la revisión o edición de textos técnicos o académicos** **Conocimientos adicionales valorados** * Experiencia en investigación aplicada, flujos de trabajo de ingeniería industrial o diseño de sistemas * Experiencia previa en RLHF, evaluación de modelos o trabajo de anotación de datos * Experiencia docente, de tutoría o de explicación de conceptos de ingeniería a audiencias no especializadas * Conocimiento de rúbricas de evaluación, referencias comparativas o marcos estructurados de revisión **Indicadores de éxito** * Identifica inexactitudes técnicas, supuestos erróneos o razonamientos incompletos en las salidas del modelo relacionadas con la ingeniería * Sus comentarios mejoran el rigor, la claridad y la corrección de las explicaciones generadas por la IA * Entrega artefactos de evaluación consistentes y reproducibles que fortalecen el desempeño del modelo