Descripción
Resumen:
Colabora con equipos líderes de IA para mejorar la calidad, utilidad y fiabilidad de los sistemas de IA conversacional de propósito general mediante la evaluación y refinamiento de conceptos de ingeniería.
Aspectos destacados:
1. Se requiere doctorado en Ingeniería o campo relacionado
2. Experiencia profunda en múltiples subdominios de la ingeniería
3. Experiencia significativa en el uso de modelos de lenguaje grande (LLM)
**Modalidad de trabajo:** Teletrabajo
**Tipo de colaboración:** Contratista independiente
**Horario:** Contrato a tiempo completo o parcial
**Requisito lingüístico:** Inglés fluido
**Función:**
Colabora con equipos líderes de IA para mejorar la calidad, utilidad y fiabilidad de los sistemas de IA conversacional de propósito general. Estos sistemas se utilizan en una amplia gama de escenarios cotidianos y profesionales, y su eficacia depende de la claridad, precisión y utilidad con que responden a las preguntas reales de los usuarios.
En contextos relacionados con la ingeniería, los sistemas de IA conversacional deben demostrar un razonamiento aplicado preciso, una precisión cuantitativa y una resolución práctica de problemas alineada con sistemas del mundo real. Este proyecto se centra en evaluar y mejorar cómo los modelos razonan sobre conceptos de ingeniería y los explican en múltiples disciplinas.
**Sus responsabilidades**
* **Redactar y perfeccionar indicaciones (prompts)** para guiar el comportamiento del modelo en escenarios de ingeniería
* **Evaluar las respuestas generadas por LLM** ante consultas relacionadas con la ingeniería, en cuanto a su exactitud técnica, razonamiento aplicado y exhaustividad
* **Realizar verificaciones de hechos y comprobar cualquier afirmación técnica** utilizando fuentes públicas autorizadas y conocimientos especializados del dominio
* **Anclar las respuestas del modelo**, identificando sus puntos fuertes, áreas de mejora y errores factuales o conceptuales
* **Evaluar la claridad, estructura y adecuación de las explicaciones** para distintos públicos
* Garantizar que **las respuestas del modelo se ajusten al comportamiento conversacional esperado** y a las directrices del sistema
* **Aplicar estándares de evaluación consistentes**, siguiendo taxonomías claras, referencias comparativas (benchmarks) y directrices detalladas de evaluación
**Perfil requerido**
* Posee un **doctorado en Ingeniería o un campo estrechamente relacionado**
* Tiene experiencia profunda en **uno o más de los siguientes subdominios**:
+ Ingeniería de sistemas mecánicos y físicos
+ Ingeniería eléctrica, electrónica e informática
+ Ingeniería química, de materiales y de procesos
+ Ingeniería civil, ambiental e infraestructuras
* Tiene **experiencia significativa en el uso de modelos de lenguaje grande (LLM)** y comprende cómo y por qué las personas los utilizan
* Tiene **excelentes habilidades de redacción** y puede explicar claramente conceptos complejos de ingeniería
* Tiene una **gran atención al detalle**, detectando sistemáticamente matices que otros podrían pasar por alto
* **Experiencia revisando o editando textos técnicos o académicos**
**Especialidades deseables**
* Experiencia en investigación aplicada, flujos de trabajo de ingeniería industriales o diseño de sistemas
* Experiencia previa con RLHF, evaluación de modelos o trabajos de anotación de datos
* Experiencia docente, de tutoría o de explicación de conceptos de ingeniería a audiencias no especializadas
* Conocimiento de rúbricas de evaluación, referencias comparativas (benchmarks) o marcos estructurados de revisión
**Indicadores de éxito**
* Identifica inexactitudes técnicas, supuestos erróneos o razonamientos incompletos en las salidas del modelo relacionadas con la ingeniería
* Sus comentarios mejoran el rigor, la claridad y la corrección de las explicaciones proporcionadas por la IA
* Entrega artefactos de evaluación consistentes y reproducibles que fortalecen el rendimiento del modelo