ChatGPT klarar CPA-examen vid andra försöket

En uppgraderad och bättre utbildad version av ChatGPT gjorde om ett övnings-CPA-prov och godkändes, inte olikt ungefär hälften av mänskliga kandidater som misslyckas på sitt första försök. Men betyder detta experiment att ChatGPT kommer för redovisningsjobb?

Så, kommer ChatGPT för redovisningsjobb?

Forskare sa att den senaste versionen av ChatGPT klarade CPA-provet, bara veckor efter att en tidigare version av chatboten misslyckades.

"Detta ifrågasätter den mänskliga revisorns "konkurrensfördel" i förhållande till maskinen. Såvitt vi vet har AI för första gången presterat lika bra som en majoritet av mänskliga revisorer på en verklig redovisningsuppgift. Detta väcker viktiga frågor om hur maskin och revisor kommer att fungera tillsammans i framtiden", sa studiens författare.

Rädslan runt omkring artificiell intelligens (AI) är att det kommer för mänskliga jobb. Det finns några jobb som a maskinen kan bara inte göra, men så finns det de det kommer att förändras för att tillgodose AI-effektivitet. Frågan är, faller redovisningsjobb i den kategorin? Det senaste testet visar att det kan vara fallet, men inte utan några justeringar av AI-systemen.

Hur ChatGPT klarade CPA-provet

ChatGPT: s framgång var inte utan hjälp.

Bättre utrustad med inlärningsverktyg

Även om ChatGPT har bevisat sina färdigheter i ett antal applikationer, har dess prestation hittills i studentbedömningar som CPA-provet varit föga imponerande, något som forskarna ville ändra.

För att justera chatboten använde forskarna "tankekedja"-uppmaning och ett "10-shot"-scenario - där det var utbildad med 10 exempel – för att bättre förbereda AI: n på ämnet och förbättra dess nyckelbehållning begrepp.

Uppgraderad version

Den version som klarade CPA-provet var ChatGPT 4.0, en uppgradering från den ursprungliga versionen. Forskarna fann att nyare modeller av ChatGPT, som är utrustade med bättre tränings- och resonemangsförmåga, överträffade äldre versioner med i genomsnitt 16,5 %.

Den tidigare versionen 3.5 fick ett genomsnitt på bara 53,1 av 100 och kunde inte klara någon del av provet, medan den senaste versionen 4.0 fick ett genomsnitt på 85,1 och klarade alla fyra avsnitten. I sin bästa sektion, revision och attestation (AUD), fick chatboten ett betyg på 87,5.

Tidigare denna månad, facktidningen Redovisning idag hade version 3.5 av ChatGPT göra CPA-provet. Chatboten fick bara 48 % i affärsmiljö och koncept (BEC), dess starkaste kategori, och ynka 35 % i finansiell redovisning och rapportering (FAR), dess svagaste kategori.

Resultaten från forskarnas test bevisar de senaste versionerna av ChatGPT, som är utrustad med de mest avancerade resonemang kapacitet ännu, kan hantera nästan vilken bedömning som helst, vilket kan få omfattande konsekvenser för stora branscher som redovisning och revision.

ChatGPT har också bevisat sin förmåga i flera högprofilerade prov, inklusive Wharton MBA-examen, advokatexamen och olika AP-prov.