{"id":13088,"date":"2024-06-25T13:48:10","date_gmt":"2024-06-25T13:48:10","guid":{"rendered":"https:\/\/dailyai.com\/?p=13088"},"modified":"2024-06-25T14:13:37","modified_gmt":"2024-06-25T14:13:37","slug":"llms-are-really-bad-at-solving-simple-river-crossing-puzzles","status":"publish","type":"post","link":"https:\/\/dailyai.com\/es\/2024\/06\/llms-are-really-bad-at-solving-simple-river-crossing-puzzles\/","title":{"rendered":"Los LLM son realmente malos resolviendo sencillos rompecabezas para cruzar r\u00edos"},"content":{"rendered":"

Los grandes modelos ling\u00fc\u00edsticos como el GPT-4o pueden realizar tareas incre\u00edblemente complejas, pero incluso los modelos m\u00e1s avanzados se enfrentan a algunos retos b\u00e1sicos de razonamiento que los ni\u00f1os pueden resolver.<\/strong><\/p>\n

En una entrevista con la CBS, el \"padrino de la IA\", Geoffrey Hinton, afirm\u00f3 que los sistemas de IA podr\u00edan ser m\u00e1s inteligentes de lo que creemos y que existe la posibilidad de que las m\u00e1quinas tomen el control.<\/p>\n

Cuando se le pregunt\u00f3 por el nivel de la tecnolog\u00eda de IA actual, Hinton afirm\u00f3: \"Creo que estamos entrando en un periodo en el que, por primera vez, podemos tener cosas m\u00e1s inteligentes que nosotros\".<\/p>\n

Yann LeCun, cient\u00edfico jefe de IA de Meta, nos quiere hacer creer que estamos muy lejos de ver que la IA alcance incluso una inteligencia \"de nivel canino\".<\/p>\n

Entonces, \u00bfcu\u00e1l es?<\/p>\n

Esta semana, los usuarios de X han publicado ejemplos de la incre\u00edble capacidad de codificaci\u00f3n de Anthropic. nuevo Claude<\/span><\/span><\/span> modelo<\/a> exposiciones. Otros realizaron experimentos para poner de manifiesto que los modelos de IA siguen teniendo dificultades para razonar de forma muy b\u00e1sica.<\/p>\n

Puzzle del cruce del r\u00edo<\/h2>\n

El cl\u00e1sico rompecabezas del cruce de r\u00edos tiene m\u00faltiples variantes, pero Versi\u00f3n de Wikipedia<\/a> lo resume as\u00ed:<\/p>\n

Un granjero con un lobo, una cabra y una col debe cruzar un r\u00edo en barca. La barca s\u00f3lo puede transportar al granjero y un \u00fanico objeto. Si se quedan juntos sin vigilancia, el lobo se comer\u00eda a la cabra, o la cabra se comer\u00eda la col. \u00bfC\u00f3mo pueden cruzar el r\u00edo sin que se coman nada?<\/p>\n

Encontrar la soluci\u00f3n requiere algo de planificaci\u00f3n b\u00e1sica y razonamiento sobre distintos escenarios, pero no es un problema especialmente dif\u00edcil de resolver. Si eres humano.<\/p>\n

\u00bfPuede GPT-4o resolverlo? Si copias y pegas el puzzle en ChatGPT te da la respuesta correcta, pero esa p\u00e1gina de Wikipedia estaba casi seguro en sus datos de entrenamiento.<\/p>\n

\u00bfY si simplific\u00e1ramos mucho el puzzle y lo cambi\u00e1ramos ligeramente para que el LLM no pudiera confiar en sus datos de entrenamiento?<\/p>\n

El catedr\u00e1tico brit\u00e1nico de Matem\u00e1ticas Sir William Timothy Gowers mostr\u00f3 c\u00f3mo la incapacidad de los LLM para aplicar la l\u00f3gica queda f\u00e1cilmente al descubierto.<\/p>\n

\"\"
Intento fallido de ChatGPT de resolver un rompecabezas simplificado para cruzar un r\u00edo. Fuente: X @wtgowers<\/a><\/figcaption><\/figure>\n

La respuesta correcta al enigma es que s\u00f3lo se necesita un viaje. Pero parece que ChatGPT est\u00e1 intentando recordar una respuesta en lugar de simplemente razonar el enigma.<\/p>\n

\u00bfEs mejor el Soneto 3.5 de Claude?<\/p>\n

El experimento del cient\u00edfico de metadatos Colin Fraser confirma que ni siquiera el principal modelo de IA disponible en la actualidad puede resolver este sencillo rompecabezas.<\/p>\n

\n

Claude<\/span><\/span><\/span> sigue sin poder resolver el problema imposible de un granjero, una oveja, un barco pic.twitter.com\/TU13wermLZ<\/a><\/p>\n

- Colin Fraser (@colin_fraser) 20 de junio de 2024<\/a><\/p><\/blockquote>\n