कंटेंट पर जाएं
लॉग इन करेंसाइन अप करें

ओपन बेंचमार्क

मार्केट सहमति के मुकाबले मॉडल

हम पूर्वानुमान के पल ही एल्गोरिदम की पूर्वानुमान संभावना और Polymarket पर नतीजे की स्पॉट कीमत लॉक करते हैं और कुछ मिनट बाद उन्हें Bitcoin में सील कर देते हैं। समाप्ति और सेटलमेंट के बाद हम दोनों मेट्रिक्स को तथ्य से जांचते हैं। छह मार्केट, एक प्रोटोकॉल, पारदर्शी ट्रैक रिकॉर्ड — उन पूर्वानुमानों सहित जो सही नहीं निकले।

जर्नल देखेंस्वतंत्र वेरिफ़िकेशन

मार्केट वर्टिकल

एक ही वेरिफ़िकेशन प्रोटोकॉल: एल्गोरिदम की संभावना लॉक होती है, मार्केट कीमत उसी के साथ फ़्रीज़ होती है, और ट्रैक रिकॉर्ड खुला रहता है।

  • क्रिप्टो और फ़ाइनेंस

    क्रिप्टो एसेट, मैक्रो इंडेक्स, कमोडिटी मार्केट और धातुएं, Polymarket के मुकाबले।

    क्रिप्टोफ़ाइनेंस

  • मौसम

    बड़े शहरों में दैनिक तापमान लक्ष्य, Polymarket मौसम कॉन्ट्रैक्ट के मुकाबले।

    मौसम

  • राजनीति और टेक

    चुनावी चक्र और कंपनियों की कैपिटलाइज़ेशन रैंकिंग, Polymarket के मुकाबले।

    राजनीतिटेक

  • खेल

    Polymarket पर मैच और टूर्नामेंट: मार्केट कीमत के मुकाबले मॉडल।

    खेल
पूर्वानुमान जर्नल
पंक्तियां:
दावाहममार्केटअसहमतितारीखनतीजा
BTCUSDT $70,000 हां9895+311 नव॰बाकी
BTCUSDT $72,000 हां9286+611 नव॰बाकी
BTCUSDT $78,000 नहीं410−611 नव॰बाकी
BTCUSDT $82,000 नहीं53+211 नव॰बाकी
BTCUSDT $70,000 हां9896+212 नव॰बाकी
BTCUSDT $72,000 हां9390+312 नव॰बाकी
BTCUSDT $74,000 हां7165+612 नव॰बाकी
ETHUSDT $1,900 हां9696012 नव॰बाकी
BTCUSDT $68,000 हां9798−112 नव॰बाकी
BTCUSDT $66,000 हां9797012 नव॰बाकी

798 में से 1–10

⇪⇪
touch: सेटलमेंट उसी पल होता है जब कीमत पहली बार स्तर तक पहुंचती है — नतीजा तारीख से बहुत पहले तय हो सकता है।
▲▼
close: बताई गई तारीख की कीमत पर सेटल होता है, और केवल उसी कीमत पर।
⧓
range: कीमत का दो स्तरों के बीच आना गिना जाता है।
✅❌
अनुमान का नतीजा: तथ्य से जांचा गया हमारा अपना अनुमान — सही निकला या नहीं।

वर्टिकल · Binance कीमत दायरे

सील किया गया पूर्वानुमान जर्नल

हर कीमत पूर्वानुमान — 50% मुख्य दायरा और 80% का दायरा — नतीजे से पहले SHA-256 से हैश होता है और Bitcoin में टाइमस्टैम्प होता है। नीचे: कैलिब्रेशन, हाल में सेटल हुआ पूर्वानुमान और पूरा जर्नल।

चित्र 1 · हम जो कहते हैं, वह कितनी बार सच होता है

हर सेटल हुए पूर्वानुमान के साथ अपडेट

मॉडलमार्केटईमानदार लाइनहाल का पूर्वानुमान

कितनी बार हुआ

0%20%40%60%80%100%मार्केट 0% – 10%: 1,648 में से 90मार्केट 10% – 20%: 1,290 में से 168मार्केट 20% – 30%: 1,216 में से 310मार्केट 30% – 40%: 1,281 में से 448मार्केट 40% – 50%: 1,010 में से 453मार्केट 50% – 60%: 580 में से 304मार्केट 60% – 70%: 171 में से 118मार्केट 70% – 80%: 45 में से 35मार्केट 80% – 90%: 53 में से 44मार्केट 90% – 100%: 174 में से 167मॉडल 0% – 10%: 2,155 में से 347मॉडल 10% – 20%: 1,310 में से 326मॉडल 20% – 30%: 1,195 में से 337मॉडल 30% – 40%: 1,127 में से 358मॉडल 40% – 50%: 781 में से 279मॉडल 50% – 60%: 437 में से 166मॉडल 60% – 70%: 159 में से 66मॉडल 70% – 80%: 69 में से 41मॉडल 80% – 90%: 47 में से 39मॉडल 90% – 100%: 188 में से 178हाल में सेटल हुआ पूर्वानुमान इस समूह में है: मॉडल 27%215513101195112778143715969471880%20%40%60%80%100%

पूर्वानुमान ने क्या कहा — “हां” की संभावना

बार — समूह में मॉडल के कितने पूर्वानुमान हैं

पूर्वानुमानों के हर समूह में इवेंट कितनी बार हुआ
कहा गयामॉडलमार्केट
0% – 10%2,155 में से 347 — 16%1,648 में से 90 — 5%
10% – 20%1,310 में से 326 — 25%1,290 में से 168 — 13%
20% – 30%1,195 में से 337 — 28%1,216 में से 310 — 25%
30% – 40%1,127 में से 358 — 32%1,281 में से 448 — 35%
40% – 50%781 में से 279 — 36%1,010 में से 453 — 45%
50% – 60%437 में से 166 — 38%580 में से 304 — 52%
60% – 70%159 में से 66 — 42%171 में से 118 — 69%
70% – 80%69 में से 41 — 59%45 में से 35 — 78%
80% – 90%47 में से 39 — 83%53 में से 44 — 83%
90% – 100%188 में से 178 — 95%174 में से 167 — 96%

चार्ट कैसे पढ़ें

  • डैश वाली लाइन — ईमानदार लाइन: 30% कहा, 100 में से 30 बार हुआ।
  • लाइन के नीचे — इवेंट कहे से कम बार हुआ: “हां” की संभावना बहुत ऊंची रखी गई। ऊपर — ज़्यादा बार: बहुत कम रखी गई। इसलिए 50% के दाईं ओर, लाइन के नीचे का बिंदु “हां” पर ज़रूरत से ज़्यादा भरोसा दिखाता है, और 50% के बाईं ओर, लाइन के ऊपर का बिंदु “नहीं” पर ज़रूरत से ज़्यादा भरोसा दिखाता है।
  • नीचे के बार — समूह में कितने पूर्वानुमान हैं। बार जितना छोटा, बिंदु पर उतना कम भरोसा किया जा सकता है; 20 से कम होने पर बिंदु फीका होता है।
मॉडल का Brier
0.195
मार्केट का Brier
0.161

औसत Brier स्कोर · कम बेहतर हैअभी मार्केट ज़्यादा सटीक है।

चित्र 1. हर बिंदु मिलती-जुलती संभावना वाले पूर्वानुमानों का समूह है। अगर मॉडल 70% कहता है और 100 में से लगभग 70 बार सही होता है, तो बिंदु डैश वाली लाइन पर आता है। क्षैतिज — पूर्वानुमान ने क्या कहा; ऊर्ध्वाधर — कितनी बार हुआ। प्रयोग के जर्नल में 7,468 पूर्वानुमान सेटल हुए। मार्केट का मतलब है उस पल की Polymarket कीमत जब मॉडल ने अपना पूर्वानुमान दर्ज किया।

अवलोकन · हाल में सेटल हुआ

Will the highest temperature in San Francisco be between 70-71°F on November 10?

Polymarket · · नतीजा “नहीं” · मॉडल का अनुमान सही निकला · मार्केट नतीजे के ज़्यादा करीब था

मॉडल
27%
मार्केट
24%
Brier (मॉडल / मार्केट)
0.071 / 0.058

डेटासेट · सील किया गया लेजर

अंतिम सील 11 नव॰, 05:00 UTC

सील किया गया लेजर

Binance कैंडल पर हमारे कीमत पूर्वानुमान: हर एक को प्रकाशन से पहले SHA-256 से हैश किया जाता है और कैंडल के क्लोज़ से जांचा जाता है।

  1. चरण 1हर पूर्वानुमान प्रकाशन से पहले पूरा लिखा जाता है, SHA-256 से हैश किया जाता है और Bitcoin ब्लॉकचेन से जोड़ा जाता है।
  2. चरण 2हम कीमत का अनुमान नहीं, एक वितरण प्रकाशित करते हैं: 50% का मुख्य दायरा और 80% का चौड़ा दायरा, हर एक अपनी बताई गई संभावना के साथ।
  3. चरण 3नतीजा उस मिनट का Binance क्लोज़ है जिसमें बताया गया सेटलमेंट का समय आता है। कोई दूसरा प्लेटफ़ॉर्म नहीं, कोई दोबारा चुनाव नहीं।
  4. चरण 4कवरेज ही स्कोर है। नतीजा लगभग आधे समय मुख्य दायरे के भीतर आना चाहिए — बहुत ज़्यादा मतलब डरपोकपन, बहुत कम मतलब ज़रूरत से ज़्यादा भरोसा, और दोनों विफलता हैं।
स्कोर किए गए पूर्वानुमान · अलग-अलग दिन
3,791
100 दिनों में
मुख्य 50% कवरेज (लक्ष्य 50%)
53%
चौड़ा 80% कवरेज (लक्ष्य 80%)
86%
माध्यिका त्रुटि · सील और इंतज़ार में
3.91%
916 बाकी

ये एसेट साथ-साथ चलते हैं। एक ही सुबह सील किए गए पूर्वानुमान स्वतंत्र दावे नहीं हैं — जब Bitcoin अपने दायरे से बाहर जाता है, तो बाकी ज़्यादातर भी उसी कैंडल पर अपने दायरे से बाहर चले जाते हैं। इसीलिए अलग-अलग दिनों की गिनती पूर्वानुमानों की गिनती के बगल में है, और कवरेज को एक अच्छे दिखने वाले आंकड़े में मिलाने के बजाय नीचे अलग-अलग दिखाया गया है।

तालिका 1. अवधि के अनुसार कवरेज — वास्तविक / लक्ष्य

अवधिमुख्य 50%चौड़ा 80%औसत त्रुटिस्कोर किए गए
24h57% / 5084% / 80+0.1%1,544
7d59% / 5087% / 80+0.1%1,396
30d33% / 5088% / 80-4.3%851

तालिका 2. एसेट के अनुसार मुख्य कवरेज · स्कोर किए गए

  • AAVE47%
  • ADA52%
  • AVAX51%
  • BCH50%
  • BNB53%
  • BTC58%
  • DOGE49%
  • DOT45%
  • ENA52%
  • ETH57%
  • HBAR43%
  • LINK52%
  • LTC46%
  • NEAR47%
  • PAXG42%
  • PEPE71%
  • QNT31%
  • SHIB57%
  • SOL62%
  • SUI47%
  • TAO57%
  • TRX73%
  • UNI56%
  • WLD9%
  • XLM42%
  • XRP47%
  • ZEC60%

तालिका 3. नवीनतम रिकॉर्ड · अंतिम सेटलमेंट 11 नव॰, 05:01 UTC

एसेटमुख्य 50%चौड़ा 80%माध्यिकानतीजाफ़ैसलाSHA-256
ETH7d$2,387–$2,653$2,260–$2,821$2,496$2,427कोर में · -2.75%9382d1cc5d0c
BTC24h$81,204–$82,794$80,163–$83,865$81,980$81,543कोर में · -0.53%18dfc41a2e97
BTC7d$80,735–$86,471$78,044–$90,693$83,423$81,543कोर में · -2.25%b28d21898d76
BNB30d$674–$792$586–$927$729$720कोर में · -1.23%295318f3ef5c
SOL30d$83.71–$115$70.96–$140$98.67$103कोर में · +4.72%14b274be2278
ETH30d$2,211–$2,934$1,868–$3,409$2,482$2,402कोर में · -3.23%a08b584983d8
BTC30d$71,416–$86,022$63,191–$99,064$77,827$80,942कोर में · +4.00%3b390b5cd0f0
AAVE30d$103–$145$92.43–$175$122$158दायरे में · +29.12%f200bc434f3a
AAVE24h$146–$154$143–$158$150$158दायरे से बाहर · +5.23%087a959a7a42
ENA24h$0.1773–$0.1913$0.172–$0.2012$0.1846$0.2023दायरे से बाहर · +9.59%8e40a3d8db6d

सबसे नए पहले · 3,791 सील किए गए पूर्वानुमानों में से 1,831–1,840 दिखाए जा रहे हैं

खुद जांचें, हम पर भरोसा करने की ज़रूरत नहीं

सील किए गए पूर्वानुमान और उनके Bitcoin टाइमस्टैम्प एक ओपन रिपॉज़िटरी में रखे जाते हैं; अपवाद उसके विवरण में दिए गए हैं। एक फ़ाइल और उसका प्रमाण (.ots) डाउनलोड करें। opentimestamps.org पर पहले प्रमाण डालें, फिर फ़ाइल, और आपको वह Bitcoin ब्लॉक दिखेगा जिससे वह जुड़ा है।

प्रमाण रिपॉज़िटरी खोलें

Timestamps by OpenTimestamps · Listed on PolyMart

  • पूर्वानुमान के कुछ मिनट बाद Bitcoin में सील। मॉडल की संभावना और मार्केट कीमत का UTC टाइमस्टैम्प एक ही है।
  • तथ्य पर स्कोर। केवल ओरेकल का आधिकारिक फ़ैसला गिना जाता है — सख्ती से 0 या 1।
  • एक ही नियम से परखा जाता है। Brier स्कोर दोनों पक्षों पर लागू होता है; यह जितना कम, पूर्वानुमान उतना सटीक।

जर्नल कैसे काम करता है

मेट्रिक्स लॉक करना

एल्गोरिदम की पूर्वानुमान संभावना, कॉन्ट्रैक्ट की स्पॉट मार्केट कीमत और समाप्ति तिथि एक UTC टाइमस्टैम्प के साथ फ़्रीज़ होती हैं। ऐतिहासिक रिकॉर्ड बदले नहीं जा सकते।

प्रोटोकॉल की संरचना

अक्सर पूछे जाने वाले सवाल

सिस्टम शुरू से अंत तक ऑडिट और पूर्वानुमान के पल ही डेटा दर्ज करने पर बना है। पूर्वानुमान प्रकाशित होने पर प्रविष्टि को एक अपरिवर्तनीय UTC टाइमस्टैम्प मिलता है, जो तीन मुख्य पैरामीटर को एक साथ जोड़कर आर्काइव करता है:

  • मॉडल की मौजूदा पूर्वानुमान संभावना।
  • Polymarket पर कॉन्ट्रैक्ट की मौजूदा स्पॉट मार्केट कीमत।
  • समाप्ति और मार्केट के फ़ैसले की सटीक तारीख।

प्रोटोकॉल समय-सीमा के बाद भेजी गई कोई भी प्रविष्टि अपने-आप खारिज कर देता है, और मौजूदा प्रविष्टियां ओवरराइट होने से सुरक्षित हैं। जर्नल एक append-only लॉग है: प्रविष्टियों को डिलीट करना, छिपाना या बाद में सुधारना कोर में ही ब्लॉक है।

वेरिफ़िकेशन की एक दूसरी, स्वतंत्र परत भी है: पूल का हर पेज Wayback Machine इंडेक्स करती है। ट्रेडिंग आधिकारिक रूप से बंद होने से पहले लिया गया स्नैपशॉट प्लेटफ़ॉर्म के ऐतिहासिक ट्रैक रिकॉर्ड से मिलान के लिए हमेशा उपलब्ध है।

AI एजेंट देखेंप्लेटफ़ॉर्म कैसे काम करता है
Nova

हम AI टर्मिनल और पेमेंट गेटवे को चालू रखने और वेरिफ़िकेशन पूरा करने के लिए कुकीज़ का इस्तेमाल करते हैं। साइट पर बने रहकर आप हमारी कुकी नीति और गोपनीयता नीति से सहमत होते हैं।

“स्वीकार करें और जारी रखें” चुनकर आप Google Ads की विज्ञापन कुकीज़ की भी अनुमति देते हैं, जिनका इस्तेमाल हमारे विज्ञापनों को मापने के लिए होता है। इनका इस्तेमाल यूज़र अकाउंट में कभी नहीं होता।