{"id":12782,"date":"2024-06-10T10:39:06","date_gmt":"2024-06-10T10:39:06","guid":{"rendered":"https:\/\/dailyai.com\/?p=12782"},"modified":"2024-06-10T10:39:06","modified_gmt":"2024-06-10T10:39:06","slug":"natural-plan-benchmarking-llms-on-natural-language-planning","status":"publish","type":"post","link":"https:\/\/dailyai.com\/sv\/2024\/06\/natural-plan-benchmarking-llms-on-natural-language-planning\/","title":{"rendered":"NATURAL PLAN: Benchmarking av LLM-program f\u00f6r planering av naturliga spr\u00e5k"},"content":{"rendered":"

Google DeepMind-forskare utvecklade NATURAL PLAN, ett riktm\u00e4rke f\u00f6r att utv\u00e4rdera LLM:ers f\u00f6rm\u00e5ga att planera verkliga uppgifter baserat p\u00e5 naturliga spr\u00e5kmeddelanden.<\/strong><\/p>\n

N\u00e4sta steg i utvecklingen av AI \u00e4r att l\u00e5ta den l\u00e4mna en chattplattform och ta p\u00e5 sig rollen som agent f\u00f6r att slutf\u00f6ra uppgifter p\u00e5 olika plattformar f\u00f6r v\u00e5r r\u00e4kning. Men det \u00e4r sv\u00e5rare \u00e4n det l\u00e5ter.<\/p>\n

Planeringsuppgifter som att schemal\u00e4gga ett m\u00f6te eller sammanst\u00e4lla en semesterplan kan verka enkla f\u00f6r oss. M\u00e4nniskor \u00e4r bra p\u00e5 att resonera sig fram genom flera steg och f\u00f6rutse om ett tillv\u00e4gag\u00e5ngss\u00e4tt kommer att leda till att det \u00f6nskade m\u00e5let uppn\u00e5s eller inte.<\/p>\n

Du kanske tycker att det \u00e4r l\u00e4tt, men \u00e4ven de b\u00e4sta AI-modellerna k\u00e4mpar med planering. Kan vi j\u00e4mf\u00f6ra dem f\u00f6r att se vilken LLM som \u00e4r b\u00e4st p\u00e5 att planera?<\/p>\n

Benchmarken NATURAL PLAN testar LLM:er p\u00e5 3 planeringsuppgifter:<\/p>\n