¿Se ha vuelto más tonto ChatGPT?

Es la afirmación que han realizado un grupo de investigadores que han comparado el rendimiento de las versiones ChatGPT 3.5 y ChatGPT entre marzo y junio. En el trasfondo de este estudio están las dudas que han compartido numerosos usuarios sobre el rendimiento de esta inteligencia artificial en los últimos meses, ya que corre el rumor de que Open AI, la empresa detrás de esta herramienta, podría haber reducido su capacidad de computación para hacer que fuera más rápida. Te contamos los detalles sobre este estudio y las dudas que arroja sobre ChatGPT.

Es algo que late desde hace unos meses, una de esas ideas que van cogiendo fuerza en el imaginario colectivo, como esa de que Instagram escucha todo lo que decimos para mostrar anuncios relacionados (aquí uno que se apunta a la teoría conspiratoria según mi experiencia personal). ChatGPT podría tener peor rendimiento ahora que hace unos meses. ¿Tiene algún fundamento este rumor? Es lo que han intentado mostrar un grupo de investigadores de la Universidad de Stanford y la Universidad de California (Berkeley). En un estudio han comparado el rendimiento y las respuestas inmediatas de ChatGPT en sus versiones 3.5 y 4 en marzo y en junio.

Utilizando el acceso a la API de ChatGPT, calcularon caídas muy importantes en la finura de las respuestas de ChatGPT 4 en campos como por ejemplo problemas matemáticos, generación de código o preguntas comprometidas desde marzo a junio, mientras que en los mismos campos ChatGPT 3.5 sí experimentó una mejoría. Aunque con todo, hay varios expertos que no consideran estos resultados determinantes. El problema de base es que OpenAI es bastante celosa sobre la estructura de su inteligencia artificial o los métodos que ha llevado a cabo para entrenarla. Tampoco es algo sorprendente que lo sea, ya que abriría la puerta a que otras empresas siguieran el mismo camino para desarrollar sus inteligencias artificiales y en este momento es el referente del mercado. ¿Tú también has notado que el funcionamiento de ChatGPT es peor en los últimos tiempos?

Vía: Ars Technica