Un 93,1% en una matrícula: ¿qué midió realmente OpenAI?

Según informa NeuralBrew, OpenAI presentó el 2 de noviembre una evaluación interna llamada LifeVal y asegura que lleva un año usándola para seguir y mejorar sus modelos. ¿Y qué sabemos del resultado para la matrícula? OpenAI muestra una puntuación del 93,1 por ciento. Es una de las cifras seleccionadas que recoge el artículo, pero no sabemos cómo se calificó esa tarea ni qué pasos siguió el modelo. ¿Qué diferencia hay entre evaluar la respuesta de un asistente y evaluar una gestión completa? Pensemos en la pregunta que plantea LifeVal. Un chatbot podría responder con consejos sobre una matrícula. La evaluación intenta ir más allá de esa respuesta y medir una acción llevada a término. En este caso, el resultado que plantea la tarea es matricular al niño en la escuela infantil adecuada después de la mudanza. Sí. Esa es la descripción que tenemos. El artículo no permite reconstruir cómo se desarrolló la prueba concreta.

Episodio completo: https://youtu.be/bdmh-NfiHh0

🤖 Contenido generado con IA: el guion, las voces y las imágenes de este episodio se produjeron con herramientas de inteligencia artificial.

#Shorts