1 poin oleh GN⁺ 2024-12-16 | 1 komentar | Bagikan ke WhatsApp
  • Crystal Ball Challenge adalah eksperimen yang meminta peserta yang melihat halaman depan WSJ satu hari lebih awal untuk memperdagangkan S&P 500 dan obligasi pemerintah AS tenor 30 tahun; eksperimen ini menunjukkan bahwa bahkan mengetahui berita masa depan pun sulit diubah menjadi keuntungan
  • Dalam eksperimen tatap muka dengan pengawasan pada November 2023, 118 peserta muda yang telah mendapat pendidikan keuangan memulai dengan $50, tetapi rata-rata pembayaran hanya $51,62, tidak berbeda secara statistik dari titik impas
  • Tingkat tebakan arah secara keseluruhan adalah 51,5%; prediksi obligasi lebih baik daripada saham, tetapi peserta tidak mampu memasang taruhan lebih besar pada aset yang lebih sering mereka tebak dengan benar
  • Pada sekitar 30% hari perdagangan, digunakan leverage lebih dari 20x, dan 4% mencapai lebih dari 60x; akibat pengambilan risiko berlebihan, sekitar separuh mengalami kerugian dan 1 dari 6 peserta bangkrut
  • Lima trader makro berpengalaman yang diundang semuanya menghasilkan keuntungan dan rata-rata meningkatkan aset sebesar 130%, menunjukkan bahwa nilai informasi masa depan sangat bergantung pada kemampuan menentukan ukuran investasi

Desain eksperimen: trading dengan halaman depan WSJ satu hari lebih awal

  • Crystal Ball Challenge adalah bentuk eksperimen pasar keuangan yang mengadaptasi premis almanak hasil olahraga dalam film Back to the Future II (1989)
  • Pada November 2023, 118 orang dewasa muda yang telah mendapat pendidikan keuangan berpartisipasi dalam lingkungan tatap muka yang diawasi
  • Setiap peserta menerima $50 dan dapat mengambil posisi pada indeks S&P 500 serta futures obligasi pemerintah AS tenor 30 tahun
  • Kondisi informasinya adalah sebagai berikut
    • Halaman depan WSJ diberikan satu hari lebih awal
    • Data harga saham dan obligasi dihitamkan
    • Hari yang diperdagangkan adalah 1 hari dari tiap tahun sejak 2008 hingga 2022, total 15 hari
    • Pada setiap tanggal, peserta dapat melakukan masing-masing 1 transaksi untuk saham dan obligasi
  • Versi web Crystal Ball Trading Challenge juga tersedia, tetapi tanpa imbalan uang
  • Di situs web tersebut, hingga saat penulisan, lebih dari 1.500 orang telah memainkan game ini

Hasil eksperimen terawasi: rata-rata hampir impas

  • Rata-rata pembayaran peserta adalah $51,62, hanya naik 3,2% dari jumlah awal
  • Hasil ini tidak berbeda secara statistik dari titik impas
  • Distribusi keuntungan lebih rapuh daripada yang ditunjukkan rata-ratanya
    • Sekitar 45% mengalami kerugian
    • 16% bangkrut
    • Sekitar 20% mencapai pembayaran maksimum $100
  • Peserta melakukan sekitar 2.067 transaksi, dengan rata-rata sekitar 18 transaksi per orang
  • Jumlah maksimum transaksi yang mungkin adalah 30 per orang, dan alasan jumlah transaksi aktual lebih rendah mencakup kebangkrutan serta melewatkan peluang trading

Ukuran transaksi adalah masalah yang lebih besar daripada prediksi arah

  • Secara keseluruhan, peserta menebak arah saham dan obligasi dengan benar 51,5%
    • Tingkat ketepatan arah transaksi saham adalah 48,2%
    • Tingkat ketepatan arah transaksi obligasi adalah 56,2%
  • Meskipun tingkat ketepatan obligasi lebih tinggi, transaksi pada saham terjadi 40% lebih banyak dibandingkan obligasi
  • Ukuran taruhan hampir tidak berkaitan dengan kemungkinan benar
    • Dari 30 peluang transaksi, pada 8 peluang kelompok peserta kira-kira condong 2 banding 1 ke arah yang benar, tetapi mereka tidak bertaruh lebih besar pada saat itu
    • Korelasi antara leverage dan tingkat kemenangan dalam transaksi saham adalah 0
    • Dalam transaksi obligasi, korelasinya -0,1
  • Leverage rata-rata adalah 13x untuk saham dan 10x untuk obligasi
    • Jika hanya melihat transaksi dengan leverage lebih dari 5x, angkanya 22x untuk saham dan 20x untuk obligasi
  • Pada sekitar 30% hari perdagangan, leverage lebih dari 20x digunakan
    • 4% mencapai 60x atau lebih
    • Dalam 17 kasus, yaitu sedikit di atas 1% dari hari perdagangan, digunakan leverage 100x
    • Leverage 100x dapat membuat probabilitas kehilangan seluruh modal mendekati 50%

Kerugian bisa berkurang hanya dengan pengaturan ukuran yang sederhana

  • Jika peserta menerapkan leverage yang konsisten dan masuk akal pada setiap transaksi, hasilnya bisa membaik
  • Dalam kondisi eksperimen, estimasi volatilitas harian yang wajar adalah sebagai berikut
    • Saham: 1,5%~2%
    • Obligasi: 1%~1,5%
  • Dengan asumsi benar 55% dari waktu, kriteria Kelly menunjuk ukuran kira-kira sebagai berikut
    • Saham: 6x
    • Obligasi: 8x
  • Jika semua peserta berdagang dengan ukuran tersebut, rata-rata imbal hasil dihitung akan menjadi 10%
  • Sebaran hasil juga dihitung akan berkurang sekitar 45%
    • Dalam eksperimen aktual, sekitar 28% kehilangan lebih dari 50% ekuitasnya
    • Dengan pengaturan ukuran 6x·8x, peserta yang rugi lebih dari 50% menjadi 4%
    • Dihitung tidak akan ada peserta yang rugi lebih dari 75% maupun bangkrut

Perbedaan yang bisa dibuat oleh aturan interpretasi berita

  • Jika peserta menafsirkan sinyal makroekonomi dari artikel halaman depan dengan aturan sederhana, mereka bisa memperoleh tingkat ketepatan yang lebih tinggi
  • Untuk obligasi, caranya adalah melakukan short obligasi ketika terlihat sinyal ekonomi kuat, inflasi tinggi, harga energi tinggi, euro kuat, atau Fed yang kurang akomodatif
  • Untuk saham, caranya adalah melakukan long saham ketika terlihat sinyal ekonomi kuat, inflasi rendah, harga energi tinggi, euro kuat, atau Fed yang lebih akomodatif
  • Jika aturan seperti ini diterapkan, tingkat ketepatannya adalah sebagai berikut
    • Saham: 58%
    • Obligasi: 64%
  • Pendekatan ini dihitung akan menghasilkan rata-rata keuntungan 6,1% per hari perdagangan dan pertumbuhan dana sebesar 2,4x
  • Ketika tidak ada berita yang relevan atau jumlah sinyal di kedua sisi sama, pilihan untuk tidak berdagang adalah rasional

Hasil trader makro berpengalaman

  • 5 trader makro berpengalaman yang diundang semuanya menutup permainan dengan keuntungan
  • Mereka adalah kelompok yang sangat terseleksi dengan latar belakang berikut
    • Kepala trading di salah satu dari 5 bank terbesar AS
    • Pendiri hedge fund makro 10 besar
    • Trader senior di fund makro 10 besar
    • Mantan trader senior obligasi pemerintah di salah satu dari 3 primary dealer terbesar AS
    • Mantan trader senior Jane Street
  • Rata-rata mereka meningkatkan aset awal sebesar 130%, dan median keuntungannya 60%
  • Pada sekitar sepertiga peluang transaksi, mereka sama sekali tidak bertaruh, dan pada hari ketika mereka menilai dampak pasar dari berita dengan yakin, mereka bertaruh besar
  • Tingkat ketepatan arah mereka 63%, lebih tinggi daripada 51,5% dari 118 peserta
    • Tingkat ketepatan obligasi adalah 71%
    • Tingkat ketepatan saham adalah 56%
  • Perbedaan hasil muncul bukan hanya dari kemampuan memprediksi arah, tetapi juga secara besar dari penentuan ukuran transaksi yang lebih rasional

Nilai ekstrem dari pemain web dan permainan berulang

  • Hasil sekitar 1.500 orang yang bermain di web untuk hiburan lebih buruk daripada peserta eksperimen terawasi
  • Hasil median pemain web adalah kerugian sekitar 30% dari modal awal
  • Di antara mereka, hanya 40% yang berakhir untung, dan 36% bangkrut
  • Enam orang membuat skor sempurna dengan bermain berulang kali dan memeriksa hasil saham serta obligasi pada setiap tanggal
  • Mereka bertaruh dengan ukuran maksimum ke arah yang benar pada semua transaksi dan meningkatkan aset awal menjadi 70.575x

Perhitungan nilai ekonomi bola kristal

  • Nilai bola kristal dihitung untuk skenario halaman depan WSJ satu hari lebih awal diberikan pada 15 hari perdagangan dengan volatilitas tinggi
  • Rasio rata-rata ekspektasi imbal hasil terhadap risiko ditetapkan 0,2, dan diasumsikan konsisten dengan menebak arah pasar dengan benar 60%
  • Investor dengan tingkat aversi risiko umum diasumsikan mengekspos 10% modalnya pada risiko untuk hasil 1 standar deviasi
  • Dalam kondisi ini, ekspektasi imbal hasil per transaksi dihitung 2%, dan imbal hasil tersesuaikan risiko sekitar 1%
  • Jika bola kristal memberikan berita yang berguna dalam 75% kasus, certainty-equivalent wealth dari 24 transaksi menjadi 1,27x
  • Dalam perhitungan ini, jumlah maksimum yang bisa dibayar untuk bola kristal adalah 21% dari aset
  • Sharpe ratio untuk transaksi menerima koran satu hari lebih awal sekali setahun adalah sekitar 0,2~0,3, lebih rendah daripada Sharpe ratio investasi pasar saham tahunan yang biasanya dibayangkan banyak orang

Keterbatasan dan hal yang perlu diperhatikan

  • Modal awal $50 adalah imbalan yang relatif kecil, sehingga perilaku peserta bisa berbeda saat berdagang dengan seluruh aset mereka
  • Jika mereka menerima informasi khusus perusahaan lebih awal dan dapat memperdagangkan saham individual, hasilnya bisa lebih baik
  • Sebagian peserta mengatakan informasi akan lebih berguna jika mereka mengetahui konteks berita halaman depan, terutama apa yang paling dikhawatirkan pasar saat itu
  • Leverage maksimum yang diizinkan dalam game lebih tinggi daripada tingkat yang dapat diakses sebagian besar investor melalui futures
  • Opsi out-of-the-money dapat menjadi alternatif, tetapi biayanya jauh lebih tinggi
  • Eksperimen mengasumsikan posisi dapat dipertahankan hingga harga penutupan hari berikutnya, tetapi dalam praktiknya pergerakan intraday bisa lebih dulu menghapus modal
  • Investor nyata sulit mengekspos seluruh asetnya pada kemungkinan kerugian tak terbatas, dan cara membatasi kerugian meliputi
    • Berdagang dengan struktur limited liability sehingga kerugian dibatasi pada modal yang disetor
    • Membeli opsi out-of-the-money jangka pendek untuk membatasi kerugian maksimum dari transaksi berleverage
  • Struktur limited liability bisa menyulitkan memperoleh leverage yang diinginkan, sedangkan pendekatan opsi menimbulkan biaya opsi

Kesimpulan: yang lebih penting daripada informasi masa depan adalah pengambilan keputusan di bawah ketidakpastian

  • Pernyataan Nassim Nicholas Taleb bahwa “jika investor diberi berita esok hari 24 jam lebih awal, mereka akan bangkrut dalam setahun” tidak persis sama dengan kondisi eksperimen ini
  • Eksperimen hanya memberikan halaman depan untuk 15 hari, dan peserta hanya menanggung risiko uang pada kisaran maksimum $100 di dalam game
  • Meski demikian, hasilnya dengan kuat menunjukkan bahwa berita masa depan saja tidak cukup
  • Upaya industri keuangan mengembangkan bola kristal sendiri perlu mempertimbangkan bahwa nilainya sulit diwujudkan tanpa penentuan ukuran investasi yang rasional
  • Hasil 118 peserta yang telah mendapat pendidikan keuangan menunjukkan pentingnya pendidikan tentang pengambilan keputusan di bawah ketidakpastian dan penentuan ukuran investasi bagi calon profesional muda di industri keuangan
  • Fakta bahwa kelima trader berpengalaman semuanya menghasilkan keuntungan mengindikasikan bahwa ada keterampilan dalam investasi diskresioner yang dapat diajarkan

1 komentar

 
GN⁺ 2024-12-16
Komentar Hacker News
  • Ada dua hal yang langsung terlihat di sini: a) hampir tidak ada horizon waktu, jadi pada dasarnya ini mirip trading jangka pendek
    Sekadar tahu apa yang akan terjadi tidak cukup; semua peserta lain harus mengambil “tindakan yang benar” dalam waktu singkat, dan seperti disebutkan di tulisan itu, hal semacam itu tidak sering terjadi
    b) WSJ bukan lagi sumber berita sebagus dulu, sehingga gamenya jadi lebih sulit. Namun, sesekali ketika ada peristiwa besar, berita sehari sebelumnya bisa membantu. Misalnya, melakukan short selling saham maskapai sebelum 9/11

    • Sulit setuju dengan pernyataan “WSJ bukan lagi sumber berita sebagus dulu.” Bukankah halaman depan WSJ merangkum berita bisnis hari itu dengan cukup baik?
    • Saya tidak yakin bahwa bereaksi terhadap peristiwa jangka pendek tertentu itu sangat menarik
      Mungkin ada kasus khusus yang cukup bisa diprediksi seperti “ini benar-benar akan membuat pasar saham turun,” tetapi arus yang lebih menarik adalah tren jangka panjang yang berlangsung 10 tahun atau lebih
    • Day trading sejauh yang saya pahami lebih seperti mencari pola yang tampak masuk akal pada grafik garis lalu memberi makna padanya
      Itu juga merupakan upaya berdagang memakai informasi publik yang sudah tercermin dalam harga oleh firma trading frekuensi tinggi dan 3.000 trader profesional bergaji tinggi di Goldman Sachs
    • Sepertinya tulisan blog itu mengatakan mereka mengambil artikel Washington Post secara acak dari 15 tahun terakhir
      Bergantung pada kapan menurutmu koran itu mulai memburuk, sepertinya kamu bisa menguji intuisi b) dengan melewati hari-hari dalam game setelah tanggal tersebut
    • 9/11 adalah contoh yang bagus. Bahkan jika kamu tahu sehari sebelumnya bahwa itu akan terjadi, dalam eksperimen ini kamu tidak akan mendapat keuntungan apa pun. Sebab pasar tidak dibuka pada hari itu
  • Triknya bagi kebanyakan orang adalah jangan pernah trading sampai muncul insight yang benar-benar besar
    Sampai saat itu, lebih baik taruh di S&P 500, dan jangan melakukan data mining
    Headline yang layak diperdagangkan itu jarang. Mungkin bencana, kemenangan pemilu, atau perubahan suku bunga
    Yang lebih baik adalah sesuatu yang bukan insider trading, tetapi mendekati informasi internal. Misalnya bekerja di suatu perusahaan dan memahami kekuatannya, sementara pasar masih melihatnya sebagai perusahaan biasa. Paling baik sebelum atau segera setelah IPO

    • Seth Klarman menyampaikan poin ini dengan sangat jelas dalam Margin of Safety. Tujuannya selalu membeli sesuatu yang bernilai 1 dolar dengan harga kurang dari 1 dolar
      Nilai aset harus kamu nilai sendiri, bukan oleh pasar, dan biasanya itu memerlukan riset yang cukup banyak
      Jika kamu tidak bersedia melakukannya, Klarman juga secara eksplisit mengatakan investasi indeks itu baik-baik saja, meski tidak akan spektakuler. Terutama karena indeks membeli dan menjual saham bukan karena alasan investasi yang bagus, melainkan karena harus menyeimbangkan komposisi
      Trading berdasarkan berita dan peristiwa pada dasarnya dekat dengan perjudian, tetapi jika kamu memang sudah memutuskan untuk berinvestasi dan sedang menunggu harga memenuhi kriteriamu, kamu bisa memakai reaksi orang lain terhadap berita sebagai waktu untuk membeli
    • Tulisan itu juga membahas bahwa trader berpengalaman menghasilkan return 60–130% pada tes yang sama, sementara mahasiswa hanya mendapat return satu digit atau merugi
      Para trader berpengalaman sama sekali tidak memasang taruhan pada sekitar 1/3 peluang trading
      Inilah hal yang selalu menonjol dalam tantangan trading semacam ini. Tantangannya membuat seolah-olah kamu harus selalu berinvestasi, dan banyak orang awam tertipu oleh itu
    • Dalam kebanyakan kasus, menjual tepat setelah IPO bukan hal yang bagus. Sebab ada insider dan penjual awal
      Menurut saya itu cukup baik sebagai titik masuk. Namun trading IPO itu sendiri secara umum berisiko besar, jadi lebih baik memilih saham yang stabil dan sudah mapan
    • Saya kenal orang-orang yang trading penuh waktu berdasarkan headline, dan ada masa ketika rata-rata langkah harian mereka kurang dari 200 langkah
      Meski begitu, return mereka bagus
    • Kutipan dari Margin Call sering dipakai, tetapi semakin saya melihat dunia, semakin saya percaya itu adalah sudut pandang yang naif
      “Ada tiga cara mencari nafkah di bisnis ini: jadilah yang pertama, jadilah lebih pintar, atau curang.”
      Kalimat ini operator boolean-nya salah. OR implisit di antara koma harus diganti menjadi AND. Alasannya sederhana. Jika kamu tidak punya kemauan untuk curang, kamu menyerahkan keunggulan itu kepada orang-orang yang curang
  • Ini memang tulisan yang menarik, tetapi jika kamu meminta 5 trader yang sangat berpengalaman memakai peristiwa historis, lalu menunjukkan headline dari peristiwa penting secara finansial seperti rilis CPI atau suku bunga, yang sangat memicu ingatan, mereka kemungkinan besar bisa mengingat hasilnya cukup banyak

    • Benar. Itu seperti mengevaluasi model dengan data latih
    • Studi tersebut mengatakan orang-orang tidak mampu mengubah informasi itu menjadi keunggulan yang stabil, sedangkan penjelasanmu membahas mengapa kebocoran informasi bisa menciptakan keunggulan yang stabil
  • Jika kamu termasuk orang yang memegang uang tunai karena khawatir pasar berada di titik tertinggi sepanjang masa dan ingin masuk saat koreksi datang, kamu perlu melihat bahwa lebih baik masuk pasar sekarang daripada menunggu
    Bahkan jika kamu tahu lewat bola kristal kapan koreksi akan datang
    https://ofdollarsanddata.com/even-god-couldnt-beat-dollar-co...

  • Cukup menyenangkan. Saya mengubah 1 juta dolar menjadi 4,5 juta dolar, sebagian besar karena beberapa taruhan besar lalu sisanya bermain aman
    Tentu saja, di dunia nyata saya tidak menerima berita besok, jadi saya menaruh 100% di reksa dana indeks

    • Penasaran reksa dana indeks yang mana
  • Tunggu, dalam tantangan ini kita tidak bisa tahu tanggalnya? Saya sedang mencobanya, dan karena tidak tahu suasana pada masa itu, rasanya seperti tantangan yang aneh
    Saya sedang melihat halaman depan dan hanya berpikir, “ini 2008?”
    Kalau hanya punya pengetahuan sehari ke depan tanpa konteks lain sama sekali, tentu saja sulit. Dalam kenyataan, konteksnya juga ada

    • Kalau tahu tanggal tepatnya, terlalu mudah mengingat penurunan besar saham pada tanggal tertentu
      Meski begitu, pada banyak soal ada cukup petunjuk untuk mempersempitnya menjadi sekitar 1–2 minggu
  • Saya memainkan game ini beberapa kali, tetapi terus kena bug. Setelah beberapa kali trading, saya membuat 2,3 juta dolar, lalu setelah itu tombol “trade” berhenti berfungsi
    Saya memakai Vivaldi, jadi mungkin itu berpengaruh

  • Judul dan kesimpulan pertama menyesatkan, sedangkan kesimpulan sebenarnya sederhana: sebagian besar berita keuangan adalah noise
    Untuk memanfaatkannya, kamu perlu filter yang bagus
    Jika ada bola kristal yang bisa menunjukkan data harga pada suatu titik di masa depan yang tepat, misalnya beberapa menit kemudian atau lebih, meski hanya sedikit tetapi cukup stabil, orang yang kompeten bisa menjadi sangat kaya

  • Karena saya tidak melakukan trading, ini dugaan bernilai rendah, tetapi ini lebih merupakan soal apa itu bola kristal
    Hanya karena sesuatu menunjukkan masa depan, bukan berarti kamu otomatis mendapat insight tentang dinamika yang menciptakan masa depan itu. Dan untuk memahami dinamika apa yang bekerja di antara berbagai faktor atau pihak, kamu juga tidak selalu harus tahu masa depan

    • Studi ini tidak terlalu berguna atau menyesatkan. Sebab ia mendefinisikan sesuatu yang tidak memberikan kemampuan melihat masa depan yang sesungguhnya sebagai bola kristal
      Kamu bisa melihat masa depan, tetapi informasi yang justru penting hilang; kalau begitu itu bukan bola kristal
  • Mereka mengatakan “mungkin penyalahgunaan leverage seperti ini…”, tetapi sebenarnya itu hanya karena ini game mainan kecil
    Jika memakai satu halaman rubrik bisnis The Economist, eksperimen ini akan berjalan sepenuhnya berbeda. Halaman depan WSJ secara harfiah kemungkinan lebih dekat ke clickbait