क्रिस्टल बॉल ट्रेडिंग गेम

 (elmwealth.com)
1 पॉइंट द्वारा GN⁺ 2024-12-16 | 1 टिप्पणियां | WhatsApp पर शेयर करें
  • Crystal Ball Challenge एक प्रयोग था जिसमें प्रतिभागियों को WSJ का पहला पेज एक दिन पहले दिखाकर S&P 500 और 30-year U.S. Treasury में ट्रेड करने को कहा गया; इसने दिखाया कि भविष्य की खबरें जानना भी उन्हें मुनाफे में बदलना आसान नहीं बनाता
  • नवंबर 2023 में प्रत्यक्ष निगरानी में हुए प्रयोग में वित्तीय शिक्षा पाए हुए 118 युवा प्रतिभागियों ने $50 से शुरुआत की, लेकिन औसत payout $51.62 रहा, जो breakeven से सांख्यिकीय रूप से अलग नहीं था
  • दिशा सही बताने की दर कुल मिलाकर 51.5% थी, और Treasury prediction stocks से बेहतर थी, लेकिन प्रतिभागी उस asset पर बड़ा bet नहीं लगा पाए जिसे वे बेहतर predict कर रहे थे
  • लगभग 30% trading days में 20x से अधिक leverage इस्तेमाल हुआ और 4% में 60x से अधिक; अत्यधिक risk लेने के कारण लगभग आधे लोगों को loss हुआ और हर 6 में से 1 bankrupt हो गया
  • आमंत्रित 5 अनुभवी macro traders सभी profitable रहे और औसतन assets को 130% बढ़ाया, जिससे पता चलता है कि भविष्य की जानकारी का मूल्य काफी हद तक position sizing की क्षमता पर निर्भर करता है

प्रयोग की रूपरेखा: एक दिन पहले मिले WSJ के पहले पेज से ट्रेडिंग

  • Crystal Ball Challenge 1989 की फिल्म Back to the Future II में sports results almanac वाली कल्पना को financial markets experiment में बदलने जैसा था
  • नवंबर 2023 में, वित्तीय शिक्षा प्राप्त 118 युवा वयस्कों ने प्रत्यक्ष निगरानी वाले माहौल में हिस्सा लिया
  • प्रत्येक प्रतिभागी को $50 मिले और वे S&P 500 index और 30-year U.S. Treasury futures में positions ले सकते थे
  • जानकारी की शर्तें इस प्रकार थीं
    • WSJ का पहला पेज एक दिन पहले दिया गया
    • stocks और bonds के price data को काला कर दिया गया
    • trading target days 2008 से 2022 तक हर साल का 1 दिन, कुल 15 दिन थे
    • हर तारीख पर stocks और bonds में एक-एक बार trade संभव था
  • Crystal Ball Trading Challenge का web version भी उपलब्ध है, लेकिन इसमें monetary reward नहीं है
  • वेबसाइट पर लेखन के समय तक 1,500 से अधिक लोगों ने game खेला था

निगरानी वाले प्रयोग के नतीजे: औसत लगभग breakeven

  • प्रतिभागियों का औसत payout $51.62 था, यानी शुरुआती राशि से केवल 3.2% ज्यादा
  • यह नतीजा सांख्यिकीय रूप से breakeven से अलग नहीं था
  • return distribution औसत से भी ज्यादा कमजोर था
    • लगभग 45% को loss हुआ
    • 16% bankrupt हो गए
    • लगभग 20% maximum payout $100 तक पहुंचे
  • प्रतिभागियों ने लगभग 2,067 trades किए, प्रति व्यक्ति औसतन करीब 18 trades
  • अधिकतम संभव trades प्रति व्यक्ति 30 थे; actual trades कम रहने के कारणों में bankruptcy और trading opportunities छोड़ना शामिल था

दिशा का अनुमान लगाने से भी बड़ी समस्या थी trade size

  • प्रतिभागियों ने stocks और bonds की दिशा कुल मिलाकर 51.5% सही बताई
    • stock trades में direction hit rate 48.2% था
    • bond trades में direction hit rate 56.2% था
  • bond hit rate ज्यादा था, लेकिन trades bonds की तुलना में stocks में 40% अधिक हुए
  • betting size का hit probability से लगभग कोई संबंध नहीं था
    • 30 trading opportunities में से 8 में प्रतिभागियों का समूह लगभग 2-to-1 अनुपात में सही दिशा की ओर झुका था, लेकिन तब भी उन्होंने बड़ा bet नहीं लगाया
    • stock trades में leverage और win rate का correlation 0 था
    • bond trades में यह -0.1 था
  • औसत leverage stocks में 13x, bonds में 10x था
    • केवल 5x से अधिक leverage वाले trades देखें तो stocks 22x, bonds 20x थे
  • लगभग 30% trading days में 20x से अधिक leverage इस्तेमाल हुआ
    • 4% में 60x या उससे अधिक
    • 17 बार, यानी trading days के 1% से थोड़ा अधिक मामलों में 100x leverage इस्तेमाल हुआ
    • 100x leverage पूंजी के पूरे loss की संभावना को लगभग 50% के करीब ला सकता था

सिर्फ सरल sizing control से भी losses घट सकते थे

  • अगर प्रतिभागियों ने हर trade पर स्थिर और reasonable leverage लगाया होता, तो परिणाम बेहतर हो सकते थे
  • प्रयोग की शर्तों में reasonable daily volatility estimates इस स्तर के थे
    • stocks: 1.5%~2%
    • bonds: 1%~1.5%
  • अगर 55% probability से सही मानें, तो Kelly criterion लगभग इस size की ओर इशारा करता है
    • stocks: 6x
    • bonds: 8x
  • अगर सभी प्रतिभागियों ने इसी size पर trade किया होता, तो औसत return 10% होने की गणना की गई
  • result dispersion भी लगभग 45% घटने की गणना की गई
    • actual experiment में करीब 28% ने अपनी equity का 50% से अधिक गंवाया
    • 6x·8x sizing में 50% से अधिक loss करने वाले 4% होते
    • 75% से अधिक loss करने वाले और bankrupt participants नहीं होते, ऐसा calculate किया गया

news interpretation rules से आ सकने वाला फर्क

  • अगर प्रतिभागियों ने front-page articles से macroeconomic signals को simple rules के रूप में interpret किया होता, तो वे higher hit rate पा सकते थे
  • bonds में, strong economy, higher inflation, higher energy prices, strong euro, और कम dovish Fed signals दिखने पर bonds को short करने का तरीका था
  • stocks में, strong economy, low inflation, higher energy prices, strong euro, और ज्यादा dovish Fed signals दिखने पर stocks को long करने का तरीका था
  • इन rules को apply करने पर hit rate इस प्रकार था
    • stocks: 58%
    • bonds: 64%
  • इस approach से प्रति trading day औसतन 6.1% return और capital की 2.4x growth आती, ऐसा calculate किया गया
  • जब relevant news न हो या दोनों तरफ signals की संख्या बराबर हो, तो trade न करना reasonable choice था

अनुभवी macro traders के नतीजे

  • आमंत्रित 5 अनुभवी macro traders सभी profit के साथ समाप्त हुए
  • वे निम्न अनुभव वाले, बहुत selective group के लोग थे
    • U.S. top 5 banks में trading head
    • top 10 macro hedge fund founder
    • top 10 macro fund के senior trader
    • U.S. top 3 primary dealer के former senior government bond trader
    • former Jane Street senior trader
  • औसतन उन्होंने शुरुआती assets को 130% बढ़ाया, और median return 60% था
  • लगभग एक-तिहाई trading opportunities में उन्होंने बिल्कुल bet नहीं लगाया, और जिन दिनों उन्हें news के market impact पर भरोसा था, उन दिनों बड़ा bet लगाया
  • direction hit rate 63% था, जो 118 प्रतिभागियों के 51.5% से अधिक था
    • bond hit rate 71% था
    • stock hit rate 56% था
  • परिणामों का अंतर केवल direction prediction ability से नहीं, बल्कि अधिक reasonable position sizing से भी काफी आया

web players और repeated play की extreme values

  • web पर मजे के लिए खेलने वाले लगभग 1,500 लोगों के नतीजे supervised experiment participants से खराब थे
  • web players का median result initial capital का लगभग 30% loss था
  • इनमें से केवल 40% profit में समाप्त हुए, और 36% bankrupt हुए
  • 6 लोगों ने repeated play से हर तारीख के stocks·bonds results देखने के बाद perfect score बनाया
  • उन्होंने हर trade में correct direction पर maximum size से bet लगाकर शुरुआती assets को 70,575x तक बढ़ाया

crystal ball का economic value calculation

  • एक दिन पहले मिले WSJ के पहले पेज को 15 high-volatility trading days पर उपलब्ध crystal ball मानकर उसका value calculate किया गया
  • average expected return-to-risk ratio को 0.2 रखा गया, और माना गया कि यह market direction को 60% सही बताने के स्तर से मेल खाता है
  • माना गया कि typical risk-averse investor 1-standard-deviation result में capital का 10% risk पर लगाएगा
  • तब per trade expected return 2%, और risk-adjusted return लगभग 1% calculate हुआ
  • अगर crystal ball 75% cases में useful news देता है, तो 24 trades में certainty-equivalent wealth 1.27x बनती है
  • इस calculation में crystal ball के लिए चुकाई जा सकने वाली maximum amount assets का 21% है
  • साल में एक बार एक दिन का newspaper पहले पाने वाली trade का Sharpe ratio लगभग 0.2~0.3 है, जो अधिकांश लोगों द्वारा सोचे जाने वाले 1-year stock market investment Sharpe ratio से कम है

सीमाएं और सावधानियां

  • $50 की starting capital relatively छोटा reward है, इसलिए प्रतिभागी अपने total assets से trade करते समय अलग व्यवहार कर सकते हैं
  • अगर company-specific information पहले मिलती और individual stocks trade किए जा सकते, तो परिणाम बेहतर हो सकते थे
  • कुछ प्रतिभागियों ने कहा कि अगर उन्हें front-page news का context, खासकर उस समय market किस बात को लेकर मुख्य रूप से चिंतित था, पता होता तो information अधिक useful होती
  • game में allowed maximum leverage उस स्तर से ज्यादा है जिस तक अधिकांश investors futures के जरिए पहुंच सकते हैं
  • out-of-the-money options alternative हो सकते हैं, लेकिन उनकी cost कहीं ज्यादा होती है
  • experiment ने माना कि position अगले दिन के close तक hold की जा सकती है, लेकिन वास्तव में intraday movement पहले ही capital को wipe out कर सकता है
  • actual investors के लिए अपनी total assets को unlimited loss possibility के exposure में रखना कठिन है, और loss limitation के तरीके ये हैं
    • limited-liability structure से trade कर loss को invested capital तक सीमित करना
    • short-term out-of-the-money options खरीदकर leveraged trade का maximum loss सीमित करना
  • limited-liability structure में desired leverage हासिल करना कठिन हो सकता है, और options approach में option cost आती है

निष्कर्ष: भविष्य की जानकारी से ज्यादा अहम है uncertainty में decision-making

  • Nassim Nicholas Taleb का कथन, “अगर investor को अगले दिन की news 24 घंटे पहले दे दी जाए, तो वह एक साल के भीतर bankrupt हो जाएगा,” experiment conditions से बिल्कुल समान नहीं था
  • experiment में केवल 15 दिनों के front pages दिए गए, और participants ने game के भीतर अधिकतम करीब $100 तक का monetary risk लिया
  • फिर भी results strongly दिखाते हैं कि future news alone पर्याप्त नहीं है
  • financial industry की proprietary crystal ball development efforts को ध्यान में रखना चाहिए कि reasonable position sizing के बिना value realization मुश्किल है
  • financial education वाले 118 participants के results दिखाते हैं कि युवा finance industry aspirants के लिए uncertainty में decision-making और position sizing की शिक्षा महत्वपूर्ण है
  • 5 अनुभवी traders के सभी profitable रहने का result संकेत देता है कि discretionary investing में भी teachable skills मौजूद हैं

संबंधित पढ़ाई

1 टिप्पणियां

 
GN⁺ 2024-12-16
Hacker News टिप्पणियाँ

  • यहाँ तुरंत दो बातें साफ़ दिखती हैं: a) समय-सीमा लगभग न के बराबर है, इसलिए यह असल में शॉर्ट-टर्म ट्रेडिंग के काफ़ी करीब है
    सिर्फ़ यह जानना काफ़ी नहीं कि क्या होने वाला है; बाकी सभी प्रतिभागियों को भी कम समय में “सही कार्रवाई” करनी होगी, और जैसा लेख में कहा गया है, ऐसा अक्सर नहीं होता
    b) WSJ पहले जितना अच्छा न्यूज़ सोर्स नहीं रहा, इसलिए गेम और मुश्किल हो जाता है। हाँ, कभी-कभी कोई बड़ा घटनाक्रम हो तो एक दिन पहले की ख़बर काम आ सकती है। उदाहरण के लिए, 9/11 से पहले airline stocks को short करना

    • “WSJ पहले जितना अच्छा न्यूज़ सोर्स नहीं रहा” इस बात से सहमत होना मुश्किल है। क्या WSJ front page उस दिन की business news का काफ़ी अच्छा सारांश नहीं देती?
    • यह बात मुझे ख़ास तौर पर विश्वसनीय नहीं लगती कि किसी शॉर्ट-टर्म घटना पर प्रतिक्रिया देना इतना दिलचस्प है
      “इससे तो stock market ज़रूर गिरेगा” जैसे कुछ विशेष मामले काफ़ी अनुमानित हो सकते हैं, लेकिन ज़्यादा दिलचस्प रुझान वे हैं जो 10 साल या उससे ज़्यादा चलते हैं
    • मेरी समझ में day trading ज़्यादातर लाइन ग्राफ़ में भरोसेमंद लगने वाले पैटर्न ढूँढ़ने और उनमें अर्थ भरने जैसा है
      और यह पहले से public information पर ट्रेड करने की कोशिश भी है, जिसे high-frequency trading firms और Goldman Sachs के 3,000 high-paid professional traders पहले ही कीमतों में शामिल कर चुके होते हैं
    • ब्लॉग पोस्ट में शायद कहा गया था कि पिछले 15 सालों की Washington Post articles को random तरीके से चुना गया
      तुम जिस समय से उस अख़बार को ख़राब मानते हो, उसके हिसाब से गेम में उस तारीख़ के बाद वाले दिनों को छोड़कर अपनी धारणा b) को टेस्ट भी कर सकते हो
    • 9/11 अच्छा उदाहरण है। अगर तुम्हें एक दिन पहले भी पता होता कि वह होने वाला है, तब भी इस प्रयोग में कोई फ़ायदा नहीं होता। क्योंकि उस दिन market खुला ही नहीं था

  • ज़्यादातर लोगों के लिए तरीका यह है कि वास्तव में बहुत बड़ी insight आने तक कभी ट्रेड न करें
    उससे पहले S&P 500 में पैसा लगाए रखना बेहतर है, और data mining से बचना चाहिए
    ट्रेड करने लायक अच्छी headlines दुर्लभ होती हैं। शायद disaster, election victory, या interest rate change जैसी चीज़ें
    इससे बेहतर वह स्थिति है जो insider trading तो नहीं, लेकिन insider knowledge के क़रीब हो। जैसे आप किसी कंपनी में काम करते हों, उसकी ताक़त समझते हों, लेकिन market अभी भी उसे एक साधारण कंपनी मान रहा हो। IPO से पहले या उसके तुरंत बाद का समय सबसे अच्छा हो सकता है

    • Seth Klarman ने Margin of Safety में यह बात हैरान कर देने वाली स्पष्टता से कही है। लक्ष्य हमेशा 1 डॉलर की चीज़ को 1 डॉलर से कम में खरीदना होता है
      asset की value का आकलन आपको ख़ुद करना चाहिए, market को नहीं, और इसके लिए आम तौर पर काफ़ी रिसर्च चाहिए
      अगर आप यह करने को तैयार नहीं हैं, तो Klarman भी साफ़ कहते हैं कि index investing ठीक है, बस चमकदार नहीं। ख़ासकर इसलिए कि index अच्छे निवेश कारणों से नहीं, बल्कि balance बनाए रखने के लिए stocks खरीदते-बेचते हैं
      news और events के आधार पर ट्रेड करना मूलतः gambling के क़रीब है, लेकिन अगर आपने पहले ही निवेश का फ़ैसला कर लिया है और बस कीमत के आपके मानदंड तक आने का इंतज़ार कर रहे हैं, तो दूसरे लोगों की news reaction को buying timing की तरह इस्तेमाल किया जा सकता है
    • लेख में यह भी बताया गया है कि अनुभवी traders ने इसी टेस्ट में 60~130% return कमाया, जबकि students single-digit return या loss तक सीमित रहे
      अनुभवी traders ने लगभग 1/3 trading opportunities में कोई bet ही नहीं लगाया
      ऐसे trading challenges में यही बात हमेशा उभरकर आती है। इन्हें ऐसा दिखाया जाता है मानो आपको हर समय invested रहना चाहिए, और बहुत से आम लोग इसी जाल में फँसते हैं
    • ज़्यादातर मामलों में IPO के तुरंत बाद बेचना अच्छा नहीं होता। क्योंकि insiders और शुरुआती sellers मौजूद होते हैं
      entry point के तौर पर यह ठीक लग सकता है। लेकिन IPO trading कुल मिलाकर बहुत जोखिमभरी है, इसलिए स्थिर और स्थापित stocks चुनना बेहतर है
    • मैं ऐसे लोगों को जानता हूँ जो headlines के आधार पर full-time ट्रेड करते हैं, और एक समय उनका औसत daily step count 200 steps से भी कम था
      फिर भी वे अच्छा return कमा रहे थे
    • Margin Call का उद्धरण बहुत इस्तेमाल होता है, लेकिन दुनिया को जितना ज़्यादा देखता हूँ, उतना ही यह नज़रिया भोला लगता है
      “इस धंधे में जीने के तीन ही तरीके हैं। पहले चलो, ज़्यादा स्मार्ट बनो, या cheat करो.”
      इस वाक्य में boolean operator ग़लत है। कॉमा के बीच का implicit OR दरअसल AND होना चाहिए। वजह सीधी है। अगर तुम cheat करने को तैयार नहीं हो, तो वह फ़ायदा उन लोगों के लिए छोड़ रहे हो जो cheat करते हैं

  • लेख दिलचस्प है, लेकिन अगर आप बेहद अनुभवी 5 traders को ऐतिहासिक घटनाएँ लिखने दें और उन्हें CPI या interest rate announcement जैसे वित्तीय रूप से अहम events की headlines दिखाएँ, तो उनकी memory काफ़ी trigger होगी और वे परिणामों का बड़ा हिस्सा याद कर सकते हैं

    • सही। यह training data पर model का evaluation करने जैसा है
    • शोध कहता है कि लोग उस जानकारी को स्थिर बढ़त में नहीं बदल पाए, लेकिन तुम्हारा वर्णन यह बता रहा है कि information leakage स्थिर बढ़त क्यों दे सकता है

  • अगर आप उन लोगों में हैं जो market के all-time high पर होने से घबराकर cash पकड़े बैठे हैं और correction आने पर entry लेना चाहते हैं, तो इससे यह समझना चाहिए कि इंतज़ार करने से बेहतर अभी market में आ जाना है
    बात यह है कि crystal ball से correction का समय पता हो, तब भी यही बेहतर है
    https://ofdollarsanddata.com/even-god-couldnt-beat-dollar-co...

  • काफ़ी मज़ेदार था। मैंने 10 लाख डॉलर को 45 लाख डॉलर बना दिया, और ज़्यादातर यह कुछ बड़े bets के बाद बाक़ी को सुरक्षित रखने की वजह से हुआ
    बेशक, असल दुनिया में मुझे कल की news नहीं मिलती, इसलिए मैं 100% index funds में हूँ

    • कौन-सा index fund, यह जानने की जिज्ञासा है

  • एक मिनट, क्या इस challenge में तारीख़ पता नहीं चल सकती? मैं अभी इसे आज़मा रहा हूँ, और उस दौर का माहौल न जानने की वजह से यह अजीब challenge लग रहा है
    अभी front page देख रहा हूँ और बस यही सोचता हूँ, “क्या यह 2008 है?”
    अगर आपके पास सिर्फ़ एक दिन आगे की जानकारी हो और कोई दूसरा context न हो, तो मुश्किल होना स्वाभाविक है। असल दुनिया में context भी साथ होता है

    • अगर सटीक तारीख़ पता चल जाए, तो कुछ ख़ास तारीख़ों के बड़े stock गिरावटों को याद करना बहुत आसान हो जाएगा
      फिर भी कई सवालों में इतने संकेत थे कि उन्हें 1~2 हफ़्ते के भीतर सीमित किया जा सकता था

  • मैंने यह गेम कई बार खेला, लेकिन इसमें बार-बार bug आया। कुछ trades के बाद मैं 23 लाख डॉलर तक पहुँच गया, फिर उसके बाद “trade” बटन ने काम करना बंद कर दिया
    मैं Vivaldi इस्तेमाल कर रहा था, तो शायद उसका कुछ असर रहा हो

  • शीर्षक और पहला निष्कर्ष गुमराह करते हैं, जबकि असली निष्कर्ष सीधा है। financial news ज़्यादातर noise होती है
    उससे फ़ायदा उठाने के लिए एक अच्छा filter चाहिए
    अगर आपके पास थोड़ा आगे का, जैसे कुछ मिनट बाद या उससे आगे का, price data स्थिर रूप से दिखाने वाली crystal ball हो, तो कोई सक्षम व्यक्ति बहुत बड़ा अमीर बन सकता है

  • मैं ट्रेड नहीं करता, इसलिए यह कम-मूल्य का अनुमान है, लेकिन यह ज़्यादा crystal ball आखिर है क्या वाले सवाल के क़रीब लगता है
    भविष्य दिख जाने से अपने-आप उन dynamics की समझ नहीं मिल जाती जो उस भविष्य को बनाते हैं। और अलग-अलग factors या पक्षों के बीच कौन-सी dynamics काम कर रही हैं, यह समझने के लिए भविष्य जानना हमेशा ज़रूरी भी नहीं है

    • यह अध्ययन बहुत उपयोगी नहीं है या फिर भ्रामक है। क्योंकि यह ऐसी चीज़ को crystal ball कह रहा है जो असल में clairvoyance देती ही नहीं
      आप भविष्य देख सकते हैं, लेकिन वही अहम जानकारी ग़ायब है; तो फिर वह crystal ball हुई ही नहीं

  • “शायद इस तरह के leverage के दुरुपयोग...” जैसी बात कही गई है, लेकिन ऐसा सिर्फ़ इसलिए है क्योंकि यह एक छोटा toy game है
    अगर The Economist के एक-पेज वाले business section का इस्तेमाल किया जाए, तो यह प्रयोग पूरी तरह अलग दिशा में जाएगा। WSJ front page सचमुच clickbait के काफ़ी क़रीब हो सकती है