De ce ChatGPT nu știe să calculeze? Misterul erorilor matematice dezvăluit

Inteligența artificială, inclusiv ChatGPT, poate scrie poezii, compune muzică și traduce texte. Totuși, deseori se împotmolește la probleme matematice simple. De ce un chatbot, care stăpânește sarcini lingvistice complexe, nu se poate descurca cu matematica de nivelul școlii primare?

Tokenizare: Când numerele se destramă

Unul dintre problemele cheie este tokenizarea. Acest proces descompune datele în părți mai mici, numite tokeni. Imaginați-vă acest lucru ca asamblarea unui puzzle, unde cuvintele sunt descompuse în silabe. Tokenizatorul, model de inteligență artificială responsabil pentru acest proces, nu înțelege semnificația numerelor.

Se poate întâmpla ca numărul 380 să fie perceput ca un token, în timp ce 381 ca două (38 și 1). Astfel, relațiile dintre cifre sunt perturbate și calculul se complică.

Mașina statistică, care bâjbâie printre numere

Un alt motiv al dificultăților matematice ale ChatGPT este natura sa statistică. Chatbotul învață pe baza unui volum mare de exemple și caută modele în acestea. De exemplu, învață că expresia „Stimate domnule” este adesea urmată de fraza „ne adresăm dumneavoastră”.

Însă în matematică, această abordare întâmpină probleme. ChatGPT poate intui că produsul numerelor care se termină în 2 va sfârși în 4, dar nu se descurcă cu rezultatele intermediare. Simplificat, modelul ChatGPT încearcă să ghicească rezultatul pe baza modelelor învățate în loc să efectueze un calcul exact.

Provocare numită înmulțire

Un studiu realizat de Yuntian Deng de la Universitatea din Waterloo a arătat că ChatGPT are probleme cu înmulțirea numerelor mai mari de patru cifre. Motivul este că o eroare în orice pas de calcul se reflectă în rezultatul final.

Imaginați-vă aceasta ca un efect de domino - o eroare provoacă o reacție în lanț și rezultatul este complet greșit. Totuși, există speranță că ChatGPT se va îmbunătăți în viitor. Deng și colegii săi au testat, de asemenea, modelul o1 de la OpenAI, care se caracterizează prin abilitatea de raționament logic.

Acest model a obținut rezultate semnificativ mai bune decât GPT-4o standard și a reușit să rezolve corect și înmulțirea numerelor cu nouă cifre. Modelul o1 gândește problema pas cu pas, ceea ce îi permite să obțină rezultate mai exacte.