कंटेंट पर जाएं
लॉग इन करेंसाइन अप करें

ओपन बेंचमार्क

मार्केट सहमति के मुकाबले मॉडल

हम पूर्वानुमान के पल ही एल्गोरिदम की पूर्वानुमान संभावना और Polymarket पर नतीजे की स्पॉट कीमत लॉक करते हैं और कुछ मिनट बाद उन्हें Bitcoin में सील कर देते हैं। समाप्ति और सेटलमेंट के बाद हम दोनों मेट्रिक्स को तथ्य से जांचते हैं। छह मार्केट, एक प्रोटोकॉल, पारदर्शी ट्रैक रिकॉर्ड — उन पूर्वानुमानों सहित जो सही नहीं निकले।

जर्नल देखेंस्वतंत्र वेरिफ़िकेशन

मार्केट वर्टिकल

एक ही वेरिफ़िकेशन प्रोटोकॉल: एल्गोरिदम की संभावना लॉक होती है, मार्केट कीमत उसी के साथ फ़्रीज़ होती है, और ट्रैक रिकॉर्ड खुला रहता है।

  • क्रिप्टो और फ़ाइनेंस

    क्रिप्टो एसेट, मैक्रो इंडेक्स, कमोडिटी मार्केट और धातुएं, Polymarket के मुकाबले।

    क्रिप्टोफ़ाइनेंस

  • मौसम

    बड़े शहरों में दैनिक तापमान लक्ष्य, Polymarket मौसम कॉन्ट्रैक्ट के मुकाबले।

    मौसम

  • राजनीति और टेक

    चुनावी चक्र और कंपनियों की कैपिटलाइज़ेशन रैंकिंग, Polymarket के मुकाबले।

    राजनीतिटेक

  • खेल

    Polymarket पर मैच और टूर्नामेंट: मार्केट कीमत के मुकाबले मॉडल।

    खेल
पूर्वानुमान जर्नल
पंक्तियां:
दावाहममार्केटअसहमतितारीखनतीजा
BTCUSDT $70,000 हां9895+311 नव॰बाकी
BTCUSDT $72,000 हां9286+611 नव॰बाकी
BTCUSDT $78,000 नहीं410−611 नव॰बाकी
BTCUSDT $82,000 नहीं53+211 नव॰बाकी
BTCUSDT $70,000 हां9896+212 नव॰बाकी
BTCUSDT $72,000 हां9390+312 नव॰बाकी
BTCUSDT $74,000 हां7165+612 नव॰बाकी
ETHUSDT $1,900 हां9696012 नव॰बाकी
BTCUSDT $68,000 हां9798−112 नव॰बाकी
BTCUSDT $66,000 हां9797012 नव॰बाकी

798 में से 1–10

⇪⇪
touch: सेटलमेंट उसी पल होता है जब कीमत पहली बार स्तर तक पहुंचती है — नतीजा तारीख से बहुत पहले तय हो सकता है।
▲▼
close: बताई गई तारीख की कीमत पर सेटल होता है, और केवल उसी कीमत पर।
⧓
range: कीमत का दो स्तरों के बीच आना गिना जाता है।
✅❌
अनुमान का नतीजा: तथ्य से जांचा गया हमारा अपना अनुमान — सही निकला या नहीं।

वर्टिकल · Binance कीमत दायरे

सील किया गया पूर्वानुमान जर्नल

हर कीमत पूर्वानुमान — 50% मुख्य दायरा और 80% का दायरा — नतीजे से पहले SHA-256 से हैश होता है और Bitcoin में टाइमस्टैम्प होता है। नीचे: कैलिब्रेशन, हाल में सेटल हुआ पूर्वानुमान और पूरा जर्नल।

चित्र 1 · हम जो कहते हैं, वह कितनी बार सच होता है

हर सेटल हुए पूर्वानुमान के साथ अपडेट

मॉडलमार्केटईमानदार लाइनहाल का पूर्वानुमान

कितनी बार हुआ

0%20%40%60%80%100%मार्केट 0% – 10%: 1,646 में से 90मार्केट 10% – 20%: 1,287 में से 167मार्केट 20% – 30%: 1,211 में से 310मार्केट 30% – 40%: 1,278 में से 447मार्केट 40% – 50%: 1,008 में से 453मार्केट 50% – 60%: 578 में से 302मार्केट 60% – 70%: 170 में से 117मार्केट 70% – 80%: 45 में से 35मार्केट 80% – 90%: 53 में से 44मार्केट 90% – 100%: 174 में से 167मॉडल 0% – 10%: 2,148 में से 344मॉडल 10% – 20%: 1,308 में से 325मॉडल 20% – 30%: 1,194 में से 337मॉडल 30% – 40%: 1,123 में से 357मॉडल 40% – 50%: 780 में से 279मॉडल 50% – 60%: 435 में से 166मॉडल 60% – 70%: 159 में से 66मॉडल 70% – 80%: 68 में से 41मॉडल 80% – 90%: 47 में से 39मॉडल 90% – 100%: 188 में से 178हाल में सेटल हुआ पूर्वानुमान इस समूह में है: मॉडल 43%214813081194112378043515968471880%20%40%60%80%100%

पूर्वानुमान ने क्या कहा — “हां” की संभावना

बार — समूह में मॉडल के कितने पूर्वानुमान हैं

पूर्वानुमानों के हर समूह में इवेंट कितनी बार हुआ
कहा गयामॉडलमार्केट
0% – 10%2,148 में से 344 — 16%1,646 में से 90 — 5%
10% – 20%1,308 में से 325 — 25%1,287 में से 167 — 13%
20% – 30%1,194 में से 337 — 28%1,211 में से 310 — 26%
30% – 40%1,123 में से 357 — 32%1,278 में से 447 — 35%
40% – 50%780 में से 279 — 36%1,008 में से 453 — 45%
50% – 60%435 में से 166 — 38%578 में से 302 — 52%
60% – 70%159 में से 66 — 42%170 में से 117 — 69%
70% – 80%68 में से 41 — 60%45 में से 35 — 78%
80% – 90%47 में से 39 — 83%53 में से 44 — 83%
90% – 100%188 में से 178 — 95%174 में से 167 — 96%

चार्ट कैसे पढ़ें

  • डैश वाली लाइन — ईमानदार लाइन: 30% कहा, 100 में से 30 बार हुआ।
  • लाइन के नीचे — इवेंट कहे से कम बार हुआ: “हां” की संभावना बहुत ऊंची रखी गई। ऊपर — ज़्यादा बार: बहुत कम रखी गई। इसलिए 50% के दाईं ओर, लाइन के नीचे का बिंदु “हां” पर ज़रूरत से ज़्यादा भरोसा दिखाता है, और 50% के बाईं ओर, लाइन के ऊपर का बिंदु “नहीं” पर ज़रूरत से ज़्यादा भरोसा दिखाता है।
  • नीचे के बार — समूह में कितने पूर्वानुमान हैं। बार जितना छोटा, बिंदु पर उतना कम भरोसा किया जा सकता है; 20 से कम होने पर बिंदु फीका होता है।
मॉडल का Brier
0.195
मार्केट का Brier
0.161

औसत Brier स्कोर · कम बेहतर हैअभी मार्केट ज़्यादा सटीक है।

चित्र 1. हर बिंदु मिलती-जुलती संभावना वाले पूर्वानुमानों का समूह है। अगर मॉडल 70% कहता है और 100 में से लगभग 70 बार सही होता है, तो बिंदु डैश वाली लाइन पर आता है। क्षैतिज — पूर्वानुमान ने क्या कहा; ऊर्ध्वाधर — कितनी बार हुआ। प्रयोग के जर्नल में 7,450 पूर्वानुमान सेटल हुए। मार्केट का मतलब है उस पल की Polymarket कीमत जब मॉडल ने अपना पूर्वानुमान दर्ज किया।

अवलोकन · हाल में सेटल हुआ

Will the highest temperature in Buenos Aires be 28°C on November 10?

Polymarket · · नतीजा “नहीं” · मॉडल का अनुमान सही निकला · मार्केट नतीजे के ज़्यादा करीब था

मॉडल
43%
मार्केट
38%
Brier (मॉडल / मार्केट)
0.188 / 0.144

डेटासेट · सील किया गया लेजर

अंतिम सील 11 नव॰, 05:00 UTC

सील किया गया लेजर

Binance कैंडल पर हमारे कीमत पूर्वानुमान: हर एक को प्रकाशन से पहले SHA-256 से हैश किया जाता है और कैंडल के क्लोज़ से जांचा जाता है।

  1. चरण 1हर पूर्वानुमान प्रकाशन से पहले पूरा लिखा जाता है, SHA-256 से हैश किया जाता है और Bitcoin ब्लॉकचेन से जोड़ा जाता है।
  2. चरण 2हम कीमत का अनुमान नहीं, एक वितरण प्रकाशित करते हैं: 50% का मुख्य दायरा और 80% का चौड़ा दायरा, हर एक अपनी बताई गई संभावना के साथ।
  3. चरण 3नतीजा उस मिनट का Binance क्लोज़ है जिसमें बताया गया सेटलमेंट का समय आता है। कोई दूसरा प्लेटफ़ॉर्म नहीं, कोई दोबारा चुनाव नहीं।
  4. चरण 4कवरेज ही स्कोर है। नतीजा लगभग आधे समय मुख्य दायरे के भीतर आना चाहिए — बहुत ज़्यादा मतलब डरपोकपन, बहुत कम मतलब ज़रूरत से ज़्यादा भरोसा, और दोनों विफलता हैं।
स्कोर किए गए पूर्वानुमान · अलग-अलग दिन
3,773
100 दिनों में
मुख्य 50% कवरेज (लक्ष्य 50%)
52%
चौड़ा 80% कवरेज (लक्ष्य 80%)
86%
माध्यिका त्रुटि · सील और इंतज़ार में
3.93%
934 बाकी

ये एसेट साथ-साथ चलते हैं। एक ही सुबह सील किए गए पूर्वानुमान स्वतंत्र दावे नहीं हैं — जब Bitcoin अपने दायरे से बाहर जाता है, तो बाकी ज़्यादातर भी उसी कैंडल पर अपने दायरे से बाहर चले जाते हैं। इसीलिए अलग-अलग दिनों की गिनती पूर्वानुमानों की गिनती के बगल में है, और कवरेज को एक अच्छे दिखने वाले आंकड़े में मिलाने के बजाय नीचे अलग-अलग दिखाया गया है।

तालिका 1. अवधि के अनुसार कवरेज — वास्तविक / लक्ष्य

अवधिमुख्य 50%चौड़ा 80%औसत त्रुटिस्कोर किए गए
24h57% / 5084% / 80+0.1%1,526
7d59% / 5087% / 80+0.1%1,396
30d33% / 5088% / 80-4.3%851

तालिका 2. एसेट के अनुसार मुख्य कवरेज · स्कोर किए गए

  • AAVE46%
  • ADA52%
  • AVAX50%
  • BCH50%
  • BNB52%
  • BTC58%
  • DOGE49%
  • DOT45%
  • ENA52%
  • ETH58%
  • HBAR43%
  • LINK52%
  • LTC46%
  • NEAR47%
  • PAXG44%
  • PEPE70%
  • QNT31%
  • SHIB57%
  • SOL62%
  • SUI47%
  • TAO57%
  • TRX73%
  • UNI56%
  • WLD9%
  • XLM42%
  • XRP47%
  • ZEC60%

तालिका 3. नवीनतम रिकॉर्ड · अंतिम सेटलमेंट 11 नव॰, 05:01 UTC

एसेटमुख्य 50%चौड़ा 80%माध्यिकानतीजाफ़ैसलाSHA-256
UNI24h$6.86–$7.17$6.66–$7.35$7.02$7.20दायरे में · +2.55%53445167a89c
BCH24h$278–$288$273–$292$284$298दायरे से बाहर · +4.93%8e18668e79b0
NEAR24h$4.33–$4.58$4.22–$4.75$4.45$4.74दायरे में · +6.44%71944365ce6a
XLM24h$0.1645–$0.1698$0.1617–$0.1726$0.1674$0.1716दायरे में · +2.51%f109a436d6cc
ADA24h$0.2001–$0.2074$0.1964–$0.2116$0.2036$0.2066कोर में · +1.47%f6ef8d226bcd
LINK24h$11.19–$11.58$10.94–$11.78$11.38$11.77दायरे में · +3.44%dd263b58259a
DOGE24h$0.0764–$0.0781$0.0751–$0.0797$0.0773$0.08001दायरे से बाहर · +3.51%a1ded1fc6a4b
ZEC24h$1,218–$1,285$1,180–$1,326$1,250$1,315दायरे में · +5.26%e18d8f38eabb
TRX24h$0.3227–$0.3323$0.3149–$0.34$0.3276$0.332कोर में · +1.34%b7134c3132e7
SOL24h$96.74–$103$93.86–$106$99.50$102कोर में · +2.82%bd5ece16795f

सबसे नए पहले · 3,773 सील किए गए पूर्वानुमानों में से 1,011–1,020 दिखाए जा रहे हैं

खुद जांचें, हम पर भरोसा करने की ज़रूरत नहीं

सील किए गए पूर्वानुमान और उनके Bitcoin टाइमस्टैम्प एक ओपन रिपॉज़िटरी में रखे जाते हैं; अपवाद उसके विवरण में दिए गए हैं। एक फ़ाइल और उसका प्रमाण (.ots) डाउनलोड करें। opentimestamps.org पर पहले प्रमाण डालें, फिर फ़ाइल, और आपको वह Bitcoin ब्लॉक दिखेगा जिससे वह जुड़ा है।

प्रमाण रिपॉज़िटरी खोलें

Timestamps by OpenTimestamps · Listed on PolyMart

  • पूर्वानुमान के कुछ मिनट बाद Bitcoin में सील। मॉडल की संभावना और मार्केट कीमत का UTC टाइमस्टैम्प एक ही है।
  • तथ्य पर स्कोर। केवल ओरेकल का आधिकारिक फ़ैसला गिना जाता है — सख्ती से 0 या 1।
  • एक ही नियम से परखा जाता है। Brier स्कोर दोनों पक्षों पर लागू होता है; यह जितना कम, पूर्वानुमान उतना सटीक।

जर्नल कैसे काम करता है

मेट्रिक्स लॉक करना

एल्गोरिदम की पूर्वानुमान संभावना, कॉन्ट्रैक्ट की स्पॉट मार्केट कीमत और समाप्ति तिथि एक UTC टाइमस्टैम्प के साथ फ़्रीज़ होती हैं। ऐतिहासिक रिकॉर्ड बदले नहीं जा सकते।

प्रोटोकॉल की संरचना

अक्सर पूछे जाने वाले सवाल

सिस्टम शुरू से अंत तक ऑडिट और पूर्वानुमान के पल ही डेटा दर्ज करने पर बना है। पूर्वानुमान प्रकाशित होने पर प्रविष्टि को एक अपरिवर्तनीय UTC टाइमस्टैम्प मिलता है, जो तीन मुख्य पैरामीटर को एक साथ जोड़कर आर्काइव करता है:

  • मॉडल की मौजूदा पूर्वानुमान संभावना।
  • Polymarket पर कॉन्ट्रैक्ट की मौजूदा स्पॉट मार्केट कीमत।
  • समाप्ति और मार्केट के फ़ैसले की सटीक तारीख।

प्रोटोकॉल समय-सीमा के बाद भेजी गई कोई भी प्रविष्टि अपने-आप खारिज कर देता है, और मौजूदा प्रविष्टियां ओवरराइट होने से सुरक्षित हैं। जर्नल एक append-only लॉग है: प्रविष्टियों को डिलीट करना, छिपाना या बाद में सुधारना कोर में ही ब्लॉक है।

वेरिफ़िकेशन की एक दूसरी, स्वतंत्र परत भी है: पूल का हर पेज Wayback Machine इंडेक्स करती है। ट्रेडिंग आधिकारिक रूप से बंद होने से पहले लिया गया स्नैपशॉट प्लेटफ़ॉर्म के ऐतिहासिक ट्रैक रिकॉर्ड से मिलान के लिए हमेशा उपलब्ध है।

AI एजेंट देखेंप्लेटफ़ॉर्म कैसे काम करता है
Nova

हम AI टर्मिनल और पेमेंट गेटवे को चालू रखने और वेरिफ़िकेशन पूरा करने के लिए कुकीज़ का इस्तेमाल करते हैं। साइट पर बने रहकर आप हमारी कुकी नीति और गोपनीयता नीति से सहमत होते हैं।

“स्वीकार करें और जारी रखें” चुनकर आप Google Ads की विज्ञापन कुकीज़ की भी अनुमति देते हैं, जिनका इस्तेमाल हमारे विज्ञापनों को मापने के लिए होता है। इनका इस्तेमाल यूज़र अकाउंट में कभी नहीं होता।