Sam Altman aborda el lanzamiento 'tortuoso' de GPT-5, trayendo 40 de vuelta y el 'fraude gráfico'.
Image Credits:Justin Sullivan / Getty Images
Durante una sesión de Reddit ask-me-anything el viernes, el CEO de OpenAI, Sam Altman, y miembros clave del equipo de GPT-5 fueron bombardeados con preguntas sobre el nuevo modelo, especialmente por qué estaba funcionando tan mal, especialmente el cambio automático de modelo.
El equipo también recibió muchas solicitudes para devolver su modelo anterior, GPT-4o. Y Altman fue preguntado sobre el error más embarazoso y, tal vez, más divertido en la presentación, el “chart crime”.
Una de las nuevas características que GPT-5 lanzó es un enrutador en tiempo real que decide cuál modelo usar para una consulta específica, respondiendo rápidamente o tomando más tiempo para “pensar” en las respuestas.
Sin embargo, varias personas en la AMA en el subreddit r/ChatGPT se quejaron de que GPT-5 no funcionaba tan bien como 4o. Altman dijo que la razón por la que GPT-5 parecía “más tonto” era que el enrutador no estaba funcionando correctamente cuando se lanzó el jueves.
“GPT-5 parecerá más inteligente a partir de hoy. Ayer, tuvimos un sev y el autoswitcher estaba fuera de servicio durante una parte del día, y el resultado fue que GPT-5 parecía mucho más tonto. También, estamos haciendo algunas intervenciones sobre cómo funciona la frontera de decisión que debería ayudarte a obtener el modelo correcto con más frecuencia. Vamos a hacerlo más transparente sobre cuál modelo está respondiendo a una consulta dada”, prometió Altman.
Sin embargo, las personas en la AMA presionaron tanto para que se devolviera 4o a los suscriptores Plus que Altman prometió al menos mirarlo. “Estamos mirando la posibilidad de permitir que los usuarios Plus continúen utilizando 4o. Estamos tratando de recopilar más datos sobre los trade-offs”, escribió.
Además, Altman prometió: “Vamos a duplicar los límites de tasa para los usuarios Plus a medida que terminemos el despliegue”. Esto debería dar a las personas una oportunidad para jugar y aprender el nuevo modelo, adaptarse a sus casos de uso sin preocuparse por agotar las consultas mensuales.
Previsiblemente, también fue preguntado sobre el gráfico increíblemente inexacto que el equipo presentó durante la presentación en vivo que rápidamente se convirtió en el blanco de muchos “chart crime” chistes. El gráfico presentó una puntuación de benchmark más baja con una barra mucho más alta.
OpenAI’s GPT-5 ‘chart crime’ Image Credits:OpenAI
Altman no respondió preguntas sobre el gráfico durante la AMA, pero el jueves llamó al gráfico un “mega error de gráfico” en X. Otros notaron que los gráficos en el artículo publicado en el blog eran correctos.
Sin embargo, el daño ya estaba hecho. Se hicieron bromas sobre usar GPT para gráficos en una presentación corporativa. GPT-5 revisor Simon Willison, que tuvo acceso temprano y generalmente le gustó el rendimiento del modelo, también señaló que convertir datos en una tabla era “un buen ejemplo de un fracaso de GPT-5”.
En cualquier caso, Altman prometió soluciones a los problemas que parecían preocupar más a la gente. Terminó la AMA con la promesa de que “continuaremos trabajando para que las cosas sean estables y seguiremos escuchando el feedback”.