{"id":13088,"date":"2024-06-25T13:48:10","date_gmt":"2024-06-25T13:48:10","guid":{"rendered":"https:\/\/dailyai.com\/?p=13088"},"modified":"2024-06-25T14:13:37","modified_gmt":"2024-06-25T14:13:37","slug":"llms-are-really-bad-at-solving-simple-river-crossing-puzzles","status":"publish","type":"post","link":"https:\/\/dailyai.com\/de\/2024\/06\/llms-are-really-bad-at-solving-simple-river-crossing-puzzles\/","title":{"rendered":"LLMs sind wirklich schlecht im L\u00f6sen von einfachen Fluss\u00fcberquerungsr\u00e4tseln"},"content":{"rendered":"

Gro\u00dfe Sprachmodelle wie GPT-4o k\u00f6nnen unglaublich komplexe Aufgaben l\u00f6sen, aber selbst die besten Modelle haben mit einigen grundlegenden Denkaufgaben zu k\u00e4mpfen, die Kinder l\u00f6sen k\u00f6nnen.<\/strong><\/p>\n

In einem Interview mit CBS sagte der \"Pate der KI\", Geoffrey Hinton, dass KI-Systeme intelligenter sein k\u00f6nnten, als wir wissen, und dass die M\u00f6glichkeit besteht, dass die Maschinen die Macht \u00fcbernehmen k\u00f6nnten.<\/p>\n

Auf die Frage nach dem Stand der aktuellen KI-Technologie sagte Hinton: \"Ich denke, wir bewegen uns auf eine Zeit zu, in der wir zum ersten Mal Dinge haben, die intelligenter sind als wir.\"<\/p>\n

Der leitende KI-Wissenschaftler von Meta, Yann LeCun, will uns glauben machen, dass wir noch weit davon entfernt sind, dass KI auch nur die Intelligenz eines Hundes\" erreicht.<\/p>\n

Welche ist es also?<\/p>\n

In dieser Woche haben Nutzer auf X Beispiele f\u00fcr die unglaublichen Codierungsf\u00e4higkeiten von Anthropic neu Claude<\/span><\/span><\/span> Modell<\/a> Exponate. Andere f\u00fchrten Experimente durch, um zu zeigen, dass KI-Modelle immer noch mit sehr grundlegenden Schlussfolgerungen zu k\u00e4mpfen haben.<\/p>\n

R\u00e4tsel zur Fluss\u00fcberquerung<\/h2>\n

Das klassische Fluss\u00fcberquerungsr\u00e4tsel hat mehrere Varianten, aber Die Wikipedia-Version<\/a> fasst es folgenderma\u00dfen zusammen:<\/p>\n

Ein Bauer mit einem Wolf, einer Ziege und einem Kohlkopf muss mit einem Boot einen Fluss \u00fcberqueren. Das Boot kann nur den Bauern und einen einzigen Gegenstand transportieren. Wenn sie zusammen unbeaufsichtigt bleiben, w\u00fcrde der Wolf die Ziege fressen, oder die Ziege den Kohl. Wie k\u00f6nnen sie den Fluss \u00fcberqueren, ohne dass etwas gefressen wird?<\/p>\n

Um die L\u00f6sung zu finden, muss man einige grundlegende \u00dcberlegungen anstellen und verschiedene Szenarien durchspielen, aber das Problem ist nicht besonders schwer zu l\u00f6sen. Wenn Sie ein Mensch sind.<\/p>\n

Kann GPT-4o es l\u00f6sen? Wenn Sie das R\u00e4tsel in ChatGPT kopieren und einf\u00fcgen, erhalten Sie die richtige Antwort, aber die Wikipedia-Seite war mit Sicherheit in den Trainingsdaten enthalten.<\/p>\n

Was w\u00e4re, wenn wir das R\u00e4tsel viel einfacher machen und es leicht ver\u00e4ndern w\u00fcrden, so dass der LLM sich nicht auf seine Trainingsdaten verlassen kann?<\/p>\n

Der britische Mathematikprofessor Sir William Timothy Gowers hat gezeigt, dass die Unf\u00e4higkeit der LLMs, Logik anzuwenden, leicht zu erkennen ist.<\/p>\n

\"\"
ChatGPTs gescheiterter Versuch, ein vereinfachtes Fluss\u00fcberquerungsr\u00e4tsel zu l\u00f6sen. Quelle: X @wtgowers<\/a><\/figcaption><\/figure>\n

Die richtige Antwort auf das R\u00e4tsel ist, dass nur eine Fahrt erforderlich ist. Aber es scheint, als ob ChatGPT versucht, sich an eine Antwort zu erinnern, anstatt einfach das R\u00e4tsel zu durchdenken.<\/p>\n

Ist Claude Sonnet 3.5 besser?<\/p>\n

Das Experiment von Meta Data Scientist Colin Fraser best\u00e4tigt, dass selbst das f\u00fchrende derzeit verf\u00fcgbare KI-Modell dieses einfache R\u00e4tsel nicht l\u00f6sen kann.<\/p>\n

\n

Claude<\/span><\/span><\/span> das unm\u00f6gliche Problem \"ein Bauer, ein Schaf, ein Boot\" immer noch nicht l\u00f6sen kann pic.twitter.com\/TU13wermLZ<\/a><\/p>\n

- Colin Fraser (@colin_fraser) 20. Juni 2024<\/a><\/p><\/blockquote>\n