ChatGPT Lulus Ujian CPA pada Upaya Kedua

Versi ChatGPT yang ditingkatkan dan lebih terlatih mengambil kembali ujian praktik CPA dan lulus, tidak seperti setengah dari kandidat manusia yang gagal pada percobaan pertama mereka. Tetapi apakah percobaan ini berarti ChatGPT akan datang untuk pekerjaan akuntansi?

Jadi, Apakah ChatGPT Datang Untuk Pekerjaan Akuntansi?

Peneliti mengatakan versi terbaru ChatGPT berhasil mengikuti ujian CPA, hanya beberapa minggu setelah chatbot versi sebelumnya gagal.

"Ini mempertanyakan 'keunggulan kompetitif' dari akuntan manusia relatif terhadap mesin. Sepengetahuan kami, untuk pertama kalinya, AI telah melakukan sebaik mayoritas akuntan manusia dalam tugas akuntansi dunia nyata. Ini menimbulkan pertanyaan penting tentang bagaimana mesin dan akuntan akan bekerja sama di masa depan," kata penulis studi tersebut.

Ketakutan di sekitar kecerdasan buatan (AI) adalah bahwa itu datang untuk pekerjaan manusia. Ada beberapa pekerjaan yang a mesin tidak bisa melakukannya, tapi kemudian ada itu yang akan berubah mengakomodasi efisiensi AI. Pertanyaannya, apakah pekerjaan akuntansi termasuk dalam kategori tersebut? Tes terbaru ini menunjukkan hal itu mungkin terjadi, tetapi bukan tanpa beberapa penyesuaian pada sistem AI.

Bagaimana ChatGPT Lulus Ujian CPA

Kesuksesan ChatGPT bukannya tanpa bantuan.

Lebih Baik Dilengkapi Dengan Alat Pembelajaran

Sementara ChatGPT telah membuktikan keahliannya dalam sejumlah aplikasi, kinerjanya sejauh ini dalam penilaian siswa seperti ujian CPA tidak mengesankan, sesuatu yang ingin diubah oleh para peneliti.

Untuk men-tweak chatbot, para peneliti menggunakan dorongan "rantai pemikiran" dan skenario "10 tembakan"—di mana itu dilatih dengan 10 contoh—untuk mempersiapkan AI dengan lebih baik tentang materi pelajaran dan meningkatkan retensi kuncinya konsep.

Versi yang Ditingkatkan

Versi yang lulus ujian CPA adalah ChatGPT 4.0, upgrade dari versi aslinya. Para peneliti menemukan model ChatGPT yang lebih baru, yang dilengkapi dengan kemampuan pelatihan dan penalaran yang lebih baik, mengungguli versi lama dengan rata-rata 16,5%.

Versi sebelumnya 3.5 rata-rata skornya hanya 53.1 dari 100 dan tidak dapat lulus ujian bagian mana pun, sedangkan Versi terbaru 4.0 rata-rata skornya 85.1 dan lulus keempat bagiannya. Di bagian terbaiknya, audit dan pengesahan (AUD), chatbot mendapat skor 87,5.

Awal bulan ini, majalah perdagangan Akuntansi Hari Ini meminta ChatGPT Versi 3.5 mengikuti Ujian CPA. Chatbot hanya mencetak 48% dalam lingkungan dan konsep bisnis (BEC), kategori terkuatnya, dan 35% remeh dalam akuntansi dan pelaporan keuangan (FAR), kategori terlemahnya.

Hasil dari pengujian para peneliti membuktikan versi terbaru dari ChatGPT, yang dilengkapi dengan penalaran paling canggih kemampuan belum, dapat menangani hampir semua penilaian, yang dapat memiliki implikasi luas untuk industri besar seperti akuntansi dan audit.

ChatGPT juga telah membuktikan kemampuannya dalam beberapa ujian profil tinggi termasuk ujian MBA Wharton, ujian pengacara, dan berbagai ujian AP.