Kemampuan penceritaan masa depan ChatGPT: eksplorasi prompt naratif untuk prediksi yang lebih baik

• Studi ini menyelidiki kemampuan prediksi ChatGPT-3.5 dan ChatGPT-4 milik OpenAI menggunakan dua strategi prompt yang berbeda, yaitu prediksi langsung dan narasi masa depan.

• Analisis berfokus pada peristiwa yang terjadi pada tahun 2022, setelah batas cutoff data pelatihan model pada September 2021, untuk mengevaluasi kemampuan memprediksi peristiwa masa depan.

• Hasil penelitian menunjukkan bahwa prompt naratif masa depan secara signifikan meningkatkan akurasi prediksi ChatGPT-4, khususnya dalam memprediksi pemenang utama Academy Awards dan tren ekonomi.

• Prompt naratif ChatGPT memanfaatkan kemampuannya dalam membangun narasi halusinatif, sehingga memungkinkan sintesis dan ekstrapolasi data yang lebih efektif dibandingkan prediksi langsung.

• Studi ini menyoroti aspek baru dari kemampuan prediksi large language model (LLM) dan mengusulkan potensi penerapannya dalam konteks analitis.

• Tim peneliti mempekerjakan dua asisten riset dan mengajukan 50 pertanyaan ke ChatGPT untuk setiap prompt guna menghasilkan distribusi jawaban, sehingga total ada 100 kali percobaan per prompt.

• Hasilnya ditampilkan dalam bentuk box plot yang menjelaskan keseluruhan distribusi jawaban untuk setiap prompt, memberikan wawasan tentang kinerja dan keterbatasan model.