GPT-4 può risolvere problemi di matematica, ma non in tutte le lingue | di Yennie Jun | Ottobre 2023 | Intelligenza-Artificiale

Alcuni esperimenti che consentono a GPT-4 di risolvere problemi di matematica in 16 lingue diverse

Si dice che la matematica è un linguaggio universale — concetti, teoremi e definizioni matematiche possono essere espressi come simboli comprensibili indipendentemente dal linguaggio.

In questo articolo metto alla prova le capacità matematiche di GPT-4 in sedici lingue diverse.

I primi esperimenti hanno mostrato GPT-4 ottenendo un punteggio elevato nei test SAT Math e AP Calculus e così via matematica di livello universitario. Tuttavia, la maggior parte di questi esperimenti testare le capacità matematiche di GPT-4 solo in inglese. Per comprendere meglio le capacità matematiche di GPT-4 oltre l’inglese, lo suggerisco sugli stessi problemi di matematica in altre quindici lingue.

Quindi, quanto è bravo GPT-4 in matematica in diverse lingue? In teoria, dovrebbe essere ugualmente buono (o cattivo) in tutte le lingue, ma sfortunatamente (come avrai intuito), non è così. GPT-4 è molto più bravo a risolvere i problemi di matematica in inglese. A seconda della lingua, GPT-4 potrebbe risolvere alcuni problemi. Per le lingue tradizionalmente con risorse limitate, tuttavia, come il birmano e l’amarico, GPT-4 non è stato in grado di risolvere i problemi che gli ho presentato.

Utilizzo i problemi matematici del Progetto Eulero sito web per testare GPT-4. (Anche questo è un ritorno al passato a uno dei miei uno dei miei articoli precedenti di quest’annodove ho utilizzato il prompt engineering utilizzando ChatGPT per risolvere alcuni problemi del progetto Euler). Progetto Eulero, dal nome matematico omonimoè un sito Web con centinaia di problemi matematici e di programmazione informatica di varia difficoltà. Avviati nel 2001, vantano oltre 850 problemi (a ottobre 2023) e pubblicano una nuova domanda circa ogni settimana.

Il bello delle domande del Progetto Euler è che ogni problema ha una risposta numericamente “corretta”: questo rende facile verificare se la risposta di GPT-4 è oggettivamente corretta o meno. Tendono anche ad essere molto più complicati dei problemi di matematica delle scuole superiori o dell’università. Attualmente, non esiste una comprensione completa su larga scala della matematica di GPT-4 (o di altri modelli linguistici di grandi dimensioni)…