Take del editor: A pesar de ser aclamado como el siguiente paso en la evolución de la inteligencia artificial, los modelos de idiomas grandes no son más inteligentes que un pedazo de madera podrida. De vez en cuando, algún experimento o prueba extraños recuerda a todos que la llamada IA »inteligente» en realidad no existe si vive fuera del informe trimestral de una compañía tecnológica.
Una emulación exacta con ciclo de la CPU Atari 2600 que se ejecuta a un exiguo 1.19 MHz es más que suficiente para humillar por completo a ChatGPT en un juego de ajedrez. El ingeniero de Citrix Robert Jr. Caruso realizó el pequeño experimento «divertido» durante el fin de semana, enfrentando el poderoso chatbot de OpenAi contra una consola virtual Atari 2600 emulada por Stella. No terminó bien para el chatbot.
Según los informes, Caruso tuvo la idea de ChatGpt, después de charlar con el bot sobre la historia de la IA y el ajedrez. El servicio de OpenAI se ofreció como voluntario para tocar «Atari Chess», que Caruso asumió que se refería al Video Chess, el único título de ajedrez lanzado para el Atari 2600.
A pesar de recibir un diseño básico del tablero para identificar las piezas, ChatGPT luchó. El bot confundido Rooks for Bishops, se perdió obvias bifurcaciones de empeño e hicieron una serie de errores desconcertantes, según Caruso. En un momento, ChatGPT incluso culpó a factores externos como los símbolos abstractos utilizados por el ajedrez de video para representar las piezas por su incapacidad para realizar un seguimiento del estado del juego.
«Durante 90 minutos, tuve que evitar que hiciera movimientos horribles y corregir la conciencia de su tablero varias veces por turno», dijo el ingeniero sobre el desempeño de ChatGPT contra una consola de CPU emulada de los años 70.
El bot aparentemente seguía pidiendo reiniciar el juego con la esperanza de mejorar su rendimiento, pero finalmente fue derrotado por un motor de ajedrez de 8 bits. Una CPU de 1 MHz debería, en el mejor de los casos, poder pensar que uno o dos avances avanzan, mientras que ChatGPT se basa en un ejército interminable de GPU modernas y hambrientas de poder para mantener su servicio de chat en funcionamiento. Y, sin embargo, la CPU de 1 MHz ganó, golpeando el chatbot a nivel principiante.
El experimento de Caruso es un recordatorio útil sobre los modelos de LLM en realidad son: Un motor de búsqueda de caja negra compleja basado en heurística diseñado para complacer constantemente al usuario final con algún tipo de resultado cautivador. No «saben» nada, no tienen capacidades de razonamiento o deducción, y ciertamente no tienen inteligencia por su cuenta. Y absolutamente apestan al ajedrez.
Nunca tuve un Atari 2600 en el día, aunque pasé algunas tardes gloriosas con mi poderosa consola Intellivision. La próxima vez, intentaré humilde chatgpt haciéndolo jugar una ronda de ajedrez de batalla en una réplica emulada de mi primera máquina x86: un 80286 que se ejecuta a un llamativo 16 MHz.
