कंटेंट पर जाएं
लॉग इन करेंसाइन अप करें

ओपन बेंचमार्क

मार्केट सहमति के मुकाबले मॉडल

हम पूर्वानुमान के पल ही एल्गोरिदम की पूर्वानुमान संभावना और Polymarket पर नतीजे की स्पॉट कीमत लॉक करते हैं और कुछ मिनट बाद उन्हें Bitcoin में सील कर देते हैं। समाप्ति और सेटलमेंट के बाद हम दोनों मेट्रिक्स को तथ्य से जांचते हैं। छह मार्केट, एक प्रोटोकॉल, पारदर्शी ट्रैक रिकॉर्ड — उन पूर्वानुमानों सहित जो सही नहीं निकले।

जर्नल देखेंस्वतंत्र वेरिफ़िकेशन

मार्केट वर्टिकल

एक ही वेरिफ़िकेशन प्रोटोकॉल: एल्गोरिदम की संभावना लॉक होती है, मार्केट कीमत उसी के साथ फ़्रीज़ होती है, और ट्रैक रिकॉर्ड खुला रहता है।

  • क्रिप्टो और फ़ाइनेंस

    क्रिप्टो एसेट, मैक्रो इंडेक्स, कमोडिटी मार्केट और धातुएं, Polymarket के मुकाबले।

    क्रिप्टोफ़ाइनेंस

  • मौसम

    बड़े शहरों में दैनिक तापमान लक्ष्य, Polymarket मौसम कॉन्ट्रैक्ट के मुकाबले।

    मौसम

  • राजनीति और टेक

    चुनावी चक्र और कंपनियों की कैपिटलाइज़ेशन रैंकिंग, Polymarket के मुकाबले।

    राजनीतिटेक

  • खेल

    Polymarket पर मैच और टूर्नामेंट: मार्केट कीमत के मुकाबले मॉडल।

    खेल
पूर्वानुमान जर्नल
पंक्तियां:
दावाहममार्केटअसहमतितारीखनतीजा
BTCUSDT $70,000 हां9895+311 नव॰बाकी
BTCUSDT $72,000 हां9286+611 नव॰बाकी
BTCUSDT $78,000 नहीं410−611 नव॰बाकी
BTCUSDT $82,000 नहीं53+211 नव॰बाकी
BTCUSDT $70,000 हां9896+212 नव॰बाकी
BTCUSDT $72,000 हां9390+312 नव॰बाकी
BTCUSDT $74,000 हां7165+612 नव॰बाकी
ETHUSDT $1,900 हां9696012 नव॰बाकी
BTCUSDT $68,000 हां9798−112 नव॰बाकी
BTCUSDT $66,000 हां9797012 नव॰बाकी

784 में से 1–10

⇪⇪
touch: सेटलमेंट उसी पल होता है जब कीमत पहली बार स्तर तक पहुंचती है — नतीजा तारीख से बहुत पहले तय हो सकता है।
▲▼
close: बताई गई तारीख की कीमत पर सेटल होता है, और केवल उसी कीमत पर।
⧓
range: कीमत का दो स्तरों के बीच आना गिना जाता है।
✅❌
अनुमान का नतीजा: तथ्य से जांचा गया हमारा अपना अनुमान — सही निकला या नहीं।

वर्टिकल · Binance कीमत दायरे

सील किया गया पूर्वानुमान जर्नल

हर कीमत पूर्वानुमान — 50% मुख्य दायरा और 80% का दायरा — नतीजे से पहले SHA-256 से हैश होता है और Bitcoin में टाइमस्टैम्प होता है। नीचे: कैलिब्रेशन, हाल में सेटल हुआ पूर्वानुमान और पूरा जर्नल।

चित्र 1 · हम जो कहते हैं, वह कितनी बार सच होता है

हर सेटल हुए पूर्वानुमान के साथ अपडेट

मॉडलमार्केटईमानदार लाइनहाल का पूर्वानुमान

कितनी बार हुआ

0%20%40%60%80%100%मार्केट 0% – 10%: 1,642 में से 90मार्केट 10% – 20%: 1,280 में से 166मार्केट 20% – 30%: 1,205 में से 309मार्केट 30% – 40%: 1,275 में से 446मार्केट 40% – 50%: 1,002 में से 451मार्केट 50% – 60%: 578 में से 302मार्केट 60% – 70%: 170 में से 117मार्केट 70% – 80%: 45 में से 35मार्केट 80% – 90%: 53 में से 44मार्केट 90% – 100%: 174 में से 167मॉडल 0% – 10%: 2,139 में से 343मॉडल 10% – 20%: 1,302 में से 323मॉडल 20% – 30%: 1,191 में से 336मॉडल 30% – 40%: 1,120 में से 356मॉडल 40% – 50%: 778 में से 279मॉडल 50% – 60%: 433 में से 166मॉडल 60% – 70%: 158 में से 66मॉडल 70% – 80%: 68 में से 41मॉडल 80% – 90%: 47 में से 39मॉडल 90% – 100%: 188 में से 178हाल में सेटल हुआ पूर्वानुमान इस समूह में है: मॉडल 13%213913021191112077843315868471880%20%40%60%80%100%

पूर्वानुमान ने क्या कहा — “हां” की संभावना

बार — समूह में मॉडल के कितने पूर्वानुमान हैं

पूर्वानुमानों के हर समूह में इवेंट कितनी बार हुआ
कहा गयामॉडलमार्केट
0% – 10%2,139 में से 343 — 16%1,642 में से 90 — 5%
10% – 20%1,302 में से 323 — 25%1,280 में से 166 — 13%
20% – 30%1,191 में से 336 — 28%1,205 में से 309 — 26%
30% – 40%1,120 में से 356 — 32%1,275 में से 446 — 35%
40% – 50%778 में से 279 — 36%1,002 में से 451 — 45%
50% – 60%433 में से 166 — 38%578 में से 302 — 52%
60% – 70%158 में से 66 — 42%170 में से 117 — 69%
70% – 80%68 में से 41 — 60%45 में से 35 — 78%
80% – 90%47 में से 39 — 83%53 में से 44 — 83%
90% – 100%188 में से 178 — 95%174 में से 167 — 96%

चार्ट कैसे पढ़ें

  • डैश वाली लाइन — ईमानदार लाइन: 30% कहा, 100 में से 30 बार हुआ।
  • लाइन के नीचे — इवेंट कहे से कम बार हुआ: “हां” की संभावना बहुत ऊंची रखी गई। ऊपर — ज़्यादा बार: बहुत कम रखी गई। इसलिए 50% के दाईं ओर, लाइन के नीचे का बिंदु “हां” पर ज़रूरत से ज़्यादा भरोसा दिखाता है, और 50% के बाईं ओर, लाइन के ऊपर का बिंदु “नहीं” पर ज़रूरत से ज़्यादा भरोसा दिखाता है।
  • नीचे के बार — समूह में कितने पूर्वानुमान हैं। बार जितना छोटा, बिंदु पर उतना कम भरोसा किया जा सकता है; 20 से कम होने पर बिंदु फीका होता है।
मॉडल का Brier
0.195
मार्केट का Brier
0.161

औसत Brier स्कोर · कम बेहतर हैअभी मार्केट ज़्यादा सटीक है।

चित्र 1. हर बिंदु मिलती-जुलती संभावना वाले पूर्वानुमानों का समूह है। अगर मॉडल 70% कहता है और 100 में से लगभग 70 बार सही होता है, तो बिंदु डैश वाली लाइन पर आता है। क्षैतिज — पूर्वानुमान ने क्या कहा; ऊर्ध्वाधर — कितनी बार हुआ। प्रयोग के जर्नल में 7,424 पूर्वानुमान सेटल हुए। मार्केट का मतलब है उस पल की Polymarket कीमत जब मॉडल ने अपना पूर्वानुमान दर्ज किया।

अवलोकन · हाल में सेटल हुआ

Will the highest temperature in Helsinki be 7°C on November 10?

Polymarket · · नतीजा “नहीं” · मॉडल का अनुमान सही निकला · मार्केट नतीजे के ज़्यादा करीब था

मॉडल
13%
मार्केट
7%
Brier (मॉडल / मार्केट)
0.018 / 0.004

डेटासेट · सील किया गया लेजर

अंतिम सील 10 नव॰, 05:00 UTC

सील किया गया लेजर

Binance कैंडल पर हमारे कीमत पूर्वानुमान: हर एक को प्रकाशन से पहले SHA-256 से हैश किया जाता है और कैंडल के क्लोज़ से जांचा जाता है।

  1. चरण 1हर पूर्वानुमान प्रकाशन से पहले पूरा लिखा जाता है, SHA-256 से हैश किया जाता है और Bitcoin ब्लॉकचेन से जोड़ा जाता है।
  2. चरण 2हम कीमत का अनुमान नहीं, एक वितरण प्रकाशित करते हैं: 50% का मुख्य दायरा और 80% का चौड़ा दायरा, हर एक अपनी बताई गई संभावना के साथ।
  3. चरण 3नतीजा उस मिनट का Binance क्लोज़ है जिसमें बताया गया सेटलमेंट का समय आता है। कोई दूसरा प्लेटफ़ॉर्म नहीं, कोई दोबारा चुनाव नहीं।
  4. चरण 4कवरेज ही स्कोर है। नतीजा लगभग आधे समय मुख्य दायरे के भीतर आना चाहिए — बहुत ज़्यादा मतलब डरपोकपन, बहुत कम मतलब ज़रूरत से ज़्यादा भरोसा, और दोनों विफलता हैं।
स्कोर किए गए पूर्वानुमान · अलग-अलग दिन
3,717
99 दिनों में
मुख्य 50% कवरेज (लक्ष्य 50%)
53%
चौड़ा 80% कवरेज (लक्ष्य 80%)
86%
माध्यिका त्रुटि · सील और इंतज़ार में
3.90%
915 बाकी

ये एसेट साथ-साथ चलते हैं। एक ही सुबह सील किए गए पूर्वानुमान स्वतंत्र दावे नहीं हैं — जब Bitcoin अपने दायरे से बाहर जाता है, तो बाकी ज़्यादातर भी उसी कैंडल पर अपने दायरे से बाहर चले जाते हैं। इसीलिए अलग-अलग दिनों की गिनती पूर्वानुमानों की गिनती के बगल में है, और कवरेज को एक अच्छे दिखने वाले आंकड़े में मिलाने के बजाय नीचे अलग-अलग दिखाया गया है।

तालिका 1. अवधि के अनुसार कवरेज — वास्तविक / लक्ष्य

अवधिमुख्य 50%चौड़ा 80%औसत त्रुटिस्कोर किए गए
24h57% / 5084% / 80+0.1%1,519
7d59% / 5087% / 80+0.2%1,372
30d34% / 5088% / 80-3.7%826

तालिका 2. एसेट के अनुसार मुख्य कवरेज · स्कोर किए गए

  • AAVE46%
  • ADA52%
  • AVAX50%
  • BCH51%
  • BNB52%
  • BTC58%
  • DOGE49%
  • DOT47%
  • ENA52%
  • ETH58%
  • HBAR43%
  • LINK52%
  • LTC46%
  • NEAR47%
  • PAXG44%
  • PEPE69%
  • QNT31%
  • SHIB57%
  • SOL63%
  • SUI46%
  • TAO57%
  • TRX72%
  • UNI56%
  • WLD10%
  • XLM42%
  • XRP48%
  • ZEC61%

तालिका 3. नवीनतम रिकॉर्ड · अंतिम सेटलमेंट 10 नव॰, 05:01 UTC

एसेटमुख्य 50%चौड़ा 80%माध्यिकानतीजाफ़ैसलाSHA-256
SOL7d$101–$118$93.29–$127$108$104कोर में · -3.31%9cf304108fc2
ETH7d$2,418–$2,738$2,240–$2,965$2,567$2,495कोर में · -2.82%5c4b74b9656a
BTC7d$78,387–$85,564$74,447–$90,840$81,707$80,870कोर में · -1.02%ce5fb6ebb2bf
BNB30d$549–$661$462–$728$604$713दायरे में · +18.03%f36d17a3519d
SOL30d$50.65–$70.93$38.30–$78.62$59.52$101दायरे से बाहर · +69.56%cb2afaf48836
ETH30d$1,653–$2,229$1,407–$2,536$1,878$2,408दायरे में · +28.21%b42fc1959fb0
BTC30d$56,382–$75,075$50,714–$81,861$63,343$77,974दायरे में · +23.10%5bc9482fd8d2
BNB24h$674–$693$663–$706$684$709दायरे से बाहर · +3.70%56245fa0a69b
SOL24h$95.60–$101$93.54–$104$97.97$101दायरे में · +2.77%adde259512e7
ETH24h$2,341–$2,426$2,285–$2,485$2,381$2,401कोर में · +0.84%fc6a7bffe50b

सबसे नए पहले · 3,717 सील किए गए पूर्वानुमानों में से 3,321–3,330 दिखाए जा रहे हैं

खुद जांचें, हम पर भरोसा करने की ज़रूरत नहीं

सील किए गए पूर्वानुमान और उनके Bitcoin टाइमस्टैम्प एक ओपन रिपॉज़िटरी में रखे जाते हैं; अपवाद उसके विवरण में दिए गए हैं। एक फ़ाइल और उसका प्रमाण (.ots) डाउनलोड करें। opentimestamps.org पर पहले प्रमाण डालें, फिर फ़ाइल, और आपको वह Bitcoin ब्लॉक दिखेगा जिससे वह जुड़ा है।

प्रमाण रिपॉज़िटरी खोलें

Timestamps by OpenTimestamps · Listed on PolyMart

  • पूर्वानुमान के कुछ मिनट बाद Bitcoin में सील। मॉडल की संभावना और मार्केट कीमत का UTC टाइमस्टैम्प एक ही है।
  • तथ्य पर स्कोर। केवल ओरेकल का आधिकारिक फ़ैसला गिना जाता है — सख्ती से 0 या 1।
  • एक ही नियम से परखा जाता है। Brier स्कोर दोनों पक्षों पर लागू होता है; यह जितना कम, पूर्वानुमान उतना सटीक।

जर्नल कैसे काम करता है

मेट्रिक्स लॉक करना

एल्गोरिदम की पूर्वानुमान संभावना, कॉन्ट्रैक्ट की स्पॉट मार्केट कीमत और समाप्ति तिथि एक UTC टाइमस्टैम्प के साथ फ़्रीज़ होती हैं। ऐतिहासिक रिकॉर्ड बदले नहीं जा सकते।

प्रोटोकॉल की संरचना

अक्सर पूछे जाने वाले सवाल

सिस्टम शुरू से अंत तक ऑडिट और पूर्वानुमान के पल ही डेटा दर्ज करने पर बना है। पूर्वानुमान प्रकाशित होने पर प्रविष्टि को एक अपरिवर्तनीय UTC टाइमस्टैम्प मिलता है, जो तीन मुख्य पैरामीटर को एक साथ जोड़कर आर्काइव करता है:

  • मॉडल की मौजूदा पूर्वानुमान संभावना।
  • Polymarket पर कॉन्ट्रैक्ट की मौजूदा स्पॉट मार्केट कीमत।
  • समाप्ति और मार्केट के फ़ैसले की सटीक तारीख।

प्रोटोकॉल समय-सीमा के बाद भेजी गई कोई भी प्रविष्टि अपने-आप खारिज कर देता है, और मौजूदा प्रविष्टियां ओवरराइट होने से सुरक्षित हैं। जर्नल एक append-only लॉग है: प्रविष्टियों को डिलीट करना, छिपाना या बाद में सुधारना कोर में ही ब्लॉक है।

वेरिफ़िकेशन की एक दूसरी, स्वतंत्र परत भी है: पूल का हर पेज Wayback Machine इंडेक्स करती है। ट्रेडिंग आधिकारिक रूप से बंद होने से पहले लिया गया स्नैपशॉट प्लेटफ़ॉर्म के ऐतिहासिक ट्रैक रिकॉर्ड से मिलान के लिए हमेशा उपलब्ध है।

AI एजेंट देखेंप्लेटफ़ॉर्म कैसे काम करता है
Nova

हम AI टर्मिनल और पेमेंट गेटवे को चालू रखने और वेरिफ़िकेशन पूरा करने के लिए कुकीज़ का इस्तेमाल करते हैं। साइट पर बने रहकर आप हमारी कुकी नीति और गोपनीयता नीति से सहमत होते हैं।

“स्वीकार करें और जारी रखें” चुनकर आप Google Ads की विज्ञापन कुकीज़ की भी अनुमति देते हैं, जिनका इस्तेमाल हमारे विज्ञापनों को मापने के लिए होता है। इनका इस्तेमाल यूज़र अकाउंट में कभी नहीं होता।