Prečo ChatGPT nevie počítať? Tajomstvá matematických omylov odhalené

Umelá inteligencia, vrátane ChatGPT, dokáže písať básne, skladať hudbu a prekladať texty. Napriek tomu sa často zasekne u jednoduchých matematických úloh. Prečo si chatbot, ktorý zvláda komplexné jazykové úlohy, neporadí s matematikou na úrovni základnej školy?

Tokenizácia: Keď sa čísla rozpadajú na kúsky

Jedným z kľúčových problémov je tokenizácia. Tento proces rozdeľuje dáta na menšie časti, tzv. tokeny. Predstavte si to ako skladanie puzzle, kde sa slová rozbíjajú na slabiky. Tokenizátor, model umelej inteligencie zodpovedný za tento proces, však nerozumie významu čísel.

Môže sa stať, že číslo 380 bude vnímané ako jeden token, zatiaľ čo 381 ako dva (38 a 1). Tým sa narušia vzťahy medzi číslicami a výpočet sa skomplikuje.

Štatistický stroj, ktorý tápe v číslach

Dalším dôvodom matematických ťažkostí ChatGPT je jeho štatistická podstata. Chatbot sa učí na základe obrovského množstva príkladov a hľadá v nich vzory. Napríklad sa naučí, že fráza „Vážený pane" je často nasledovaná frázou „obraciame sa na Vás".

V matematike sa však tento prístup stretáva s problémami. ChatGPT síce dokáže odhadnúť, že súčin čísel končiacich na 2 bude končiť na 4, ale s medzi výsledkami si neporadí. Zjednodušene povedané, model ChatGPT sa snaží uhádnuť výsledok na základe naučených vzorcov namiesto toho, aby vykonal presný výpočet.

Výzva menom násobenie

Štúdia prevedená Yuntianom Dengem z University of Waterloo ukázala, že ChatGPT má problémy s násobením čísel väčších ako štyri cifry. Dôvodom je, že chyba v akomkoľvek kroku výpočtu sa prejaví v konečnom výsledku.

Predstavte si to ako dominový efekt – jedna chyba spustí reťazovú reakciu a výsledok je úplne mimo. Existuje však nádej, že sa ChatGPT v budúcnosti zlepší. Deng a jeho kolegovia testovali tiež model o1 od OpenAI, ktorý sa vyznačuje schopnosťou logického uvažovania.

Tento model dosiahol výrazne lepšie výsledky než štandardný GPT-4o a dokázal správne vyriešiť aj násobenie deväťciferných čísel. Model o1 totiž premýšľa nad problémom krok za krokom, čo mu umožňuje dosiahnuť presnejšie výsledky.