El bot asombrosamente simplista de OpenAI va a cambiar el mundo. Antes de que lo haga, esperemos que sepa mucho mejor de lo que está hablando.
por HARRY MCCRACKEN
Prueba rápida: ¿Cuál fue la primera caricatura de TV? Eso es fácil: Los Picapiedra , que debutó en ABC en 1960.
Pero espera. Once años antes de eso, estaba Las nuevas aventuras de Pinocho de NBC , creada por Guido Martina y Angelo Bioletto. Y The Adventures of Peg o’ the Ring de Max Fleischer se emitió el 30 de abril de 1933. Incluso eso se produjo después de la caricatura experimental de Bray Studios de 1930 The Creation , que a su vez fue precedida por The Funk Popilin Show de 1929 .
En realidad, todos estos nominados están completamente equivocados. Provienen del chatbot de IA gratuito ChatGPT de OpenAI , que proporcionó una respuesta diferente cada vez que le pregunté “¿Cuál fue la primera caricatura de televisión?” Los Picapiedra , como saben, fue una caricatura real, solo que no fue la primera que se hizo para la televisión. Los otros no existían o diferían enormemente de las descripciones de ChatGPT sobre ellos. Las aventuras de Peg o’ the Ring , por ejemplo, fue una serie cinematográfica de acción real de 1916 , no una obra de animación, y Max Fleischer no tuvo nada que ver con eso.
(¿Cuál fue el primer dibujo animado de televisión? Crusader Rabbit , que se emitió en sindicación a partir de 1950 , tradicionalmente recibe el visto bueno, y ChatGPT lo mencionó de pasada un par de veces. Hay un par de candidatos anteriores, y si puede nombrarlos, sabes mucho más sobre el tema que cualquier bot).
Solo han pasado seis semanas desde que OpenAI puso ChatGPT a disposición del público. Pero su asombrosa capacidad para comprender las solicitudes y responder en una prosa clara y bien organizada que se lee como si hubiera sido escrita por un humano ya hace que su introducción se sienta como un momento de cambio de época para la industria tecnológica, si no para la humanidad misma. No puedo pensar en otra pieza nueva de informática que parezca tan . . . bueno, imposible a primera vista. (Lo siento, iPhone de 2007).
Pero cada vez que hablo con ChatGPT sobre cualquier tema sobre el que sé mucho, como la historia de la animación, lo que más me sorprende es lo poco confiable que es. Si un ingeniero de software sin escrúpulos se dispusiera a envenenar nuestro corpus de conocimiento compartido mediante la generación masiva de información errónea que suena convincente, el resultado final podría ser algo como esto. Es propenso a estropear el orden cronológico de los eventos, combinar a varias personas con antecedentes similares y, como un estudiante sin preparación, lanzar pronunciamientos vagos que no requieren que sepa nada sobre el tema en cuestión. Todavía no estoy seguro de cómo surgen gemas como una caricatura imaginaria de 1929 llamada The Funk Popilin Show .
Incluso cuando ChatGPT es en su mayoría preciso, como a veces lo es, a menudo comete uno o dos errores fundamentales. Por ejemplo, me dijo que el ex director general de Apple, John Sculley, fue el responsable del iPod, un producto lanzado ocho años después de que dejara la empresa. Algunas personas lo detectarán inmediatamente como un error; otros no lo harán. Pero, ¿alguien se molestará en verificarlo?
Se han escrito innumerables artículos de opinión sobre la posibilidad de que los estudiantes hagan trampa haciendo que ChatGPT les haga la tarea . Estoy más preocupado por la gente que lo usa con seriedad como una herramienta de investigación, comprando sus inexactitudes y difundiéndolas, momento en el cual será muy difícil eliminarlos del registro. No es de extrañar que Google, cuyos investigadores inventaron la IA “transformadora” que hace posible ChatGPT, tenga miedo de incorporar algo similar en su motor de búsqueda .
Para ser justos con OpenAI, tiene cuidado de reducir las expectativas sobre la versión actual de su bot. El CEO Sam Altman ha tuiteado que es “una vista previa del progreso” y que hay “mucho trabajo por hacer en cuanto a solidez y veracidad”. Las preguntas frecuentes de la compañía advierten que ChatGPT “ocasionalmente puede producir respuestas incorrectas”, una bienvenida admisión de falibilidad, aunque lo hace con mucha más frecuencia que ocasionalmente según mi experiencia.
Los días de ChatGPT como un experimento ciertamente defectuoso pueden estar contados. Microsoft, que ya ha invertido 1.000 millones de dólares en OpenAI, está contemplando aportar otros 10.000 millones de dólares a cambio de una participación del 49 por ciento en la empresa, informan Liz Hoffman y Reed Albergotti de Semafor . Según Aaron Holmes y Kevin McLaughlin de The Information , el gigante del software planea integrar la tecnología en el corazón de ChatGPT en una serie de aplicaciones , donde podría hacer de todo, desde hacer que Bing sea más conversacional hasta permitir que Word redacte automáticamente documentos comerciales.
Para cuando estas características estén activas, podrían funcionar con GPT-4, la próxima versión del modelo de lenguaje grande de OpenAI , que se dice que es radicalmente más potente que GPT-3 . Esperemos que represente un gran avance en la precisión.
Por ahora, ChatGPT es más impresionante cuando lo dirige en direcciones que le dan cierto margen de maniobra en cuestiones de hecho. Uno de mis ejemplos favoritos de que es realmente útil es su respuesta a una pregunta de Casey Newton de Platformer : “¿Cuáles son algunos estilos de zapatos que todo hombre debería tener en su guardarropa?” No es necesario ser un experto en calzado para juzgar la calidad de las recomendaciones del bot, que incluían zapatos oxford, mocasines, zapatillas y botines Chelsea. Es muy posible que los encuentre un punto de partida útil para futuras investigaciones. E incluso si ChatGPT ofreciera un consejo que no fuera excelente, o simplemente extraño, no hay posibilidad de que sea una influencia corruptora en la sociedad.
O simplemente podrías invitarlo a inventar cosas. Por ejemplo, mi colega Jared Newman ha estado entreteniendo a sus hijos convirtiéndolos en las estrellas de los cuentos para dormir generados por ChatGPT. Es difícil pensar en un propósito más noble para un software que ya hace girar la fantasía con tanto aplomo.
Fuente: https://www.fastcompany.com/90833017/openai-chatgpt-accuracy-gpt-4