Un recente studio condotto dall’Università Statale di Washington ha analizzato l’efficacia di ChatGPT in ambito finanziario, rivelando che l’IA si è dimostrata competente in compiti di ampio respiro, ma ha mostrato debolezze in aree più complesse e sfumate. In particolare, ChatGPT 4.0 ha evidenziato prestazioni superiori rispetto alla sua versione precedente, ChatGPT 3.5 ottimizzata, che ha però raggiunto una precisione paragonabile.
L’IA è considerata un ausilio per i professionisti finanziari anziché una loro sostituzione, ma potrebbe influenzare i ruoli di base che coinvolgono attività ripetitive. I grandi modelli linguistici come ChatGPT hanno dimostrato di eccellere nelle risposte a domande a risposta multipla negli esami di certificazione finanziaria, ma hanno mostrato difficoltà in compiti più complessi.
Lo studio ha coinvolto oltre 10.000 risposte fornite dai modelli di intelligenza artificiale BARD, Llama e ChatGPT a domande di esami finanziari. I ricercatori hanno non solo valutato la capacità dei modelli di selezionare risposte corrette, ma li hanno anche sollecitati a fornire spiegazioni per le loro scelte, confrontandole con quelle dei professionisti umani. Tra i modelli testati, le due versioni di ChatGPT hanno ottenuto le migliori prestazioni complessive, sebbene abbiano mostrato imprecisioni significative in argomenti avanzati.
Secondo DJ Fairhurst della Carson College of Business dell’WSU, autore dello studio, è ancora presto per preoccuparsi del possibile sostituirsi dei lavori finanziari da parte di ChatGPT. L’IA può sintetizzare concetti ampi con facilità, ma riscontra difficoltà in questioni specifiche e complesse.
Lo studio, pubblicato sul Financial Analysts Journal, ha coinvolto domande tratte da esami di licenza finanziaria come l’Essentials dell’Industria dei Titoli e le Serie 6, 7, 65 e 66. I ricercatori hanno richiesto ai modelli di fornire spiegazioni scritte per andare oltre la semplice selezione della risposta corretta, scegliendo domande pertinenti per i professionisti finanziari.
La versione a pagamento di ChatGPT, la 4.0, ha mostrato le prestazioni migliori, con risposte più simili a quelle umane e una precisione superiore del 18-28% rispetto agli altri modelli. Tuttavia, ottimizzando la versione gratuita di ChatGPT 3.5, i ricercatori sono riusciti a migliorarne la precisione, avvicinandola e superando in alcuni casi ChatGPT 4.0.
Entrambi i modelli hanno evidenziato punti deboli in situazioni specializzate come la determinazione della copertura assicurativa e lo stato fiscale, nonostante si siano comportati bene nella revisione di transazioni e trend finanziari. Fairhurst e Greene, insieme ad Adam Bozman dell’WSU, stanno attualmente esplorando ulteriori utilizzi di ChatGPT, concentrandosi sulle fusioni aziendali.
In conclusione, l’IA come ChatGPT potrebbe essere meglio impiegata come strumento di supporto per i professionisti finanziari anziché come loro sostituto. Tuttavia, potrebbe portare a cambiamenti nell’impiego degli analisti junior nelle banche d’investimento, riducendo i compiti più umili e spostando l’attenzione su mansioni più complesse.
