- Opus 4.7 के नए tokenizer के कारण एक ही prompt को ज़्यादा tokens के रूप में गिना जाने की समस्या का विश्लेषण करने वाला कैलकुलेशन टूल
- एक ही input, content type के अनुसार 1.0~1.35x tokens में map होता है, और शब्द बदले बिना भी प्रति request लागत बढ़ती है
- वास्तविक गणना में Opus 4.7 में Opus 4.6 की तुलना में औसत request tokens और औसत request cost दोनों में +37.4% वृद्धि
- वृद्धि की सीमा हाल की 50 entries के आधार पर न्यूनतम +19.0% से अधिकतम +86.2% तक, और +30% व +40% रेंज के मामले व्यापक रूप से वितरित
- इस पेज पर conversation, system prompt, text पेस्ट करके Opus 4.7 vs 4.6 token count अंतर और मौजूदा कीमत के आधार पर लागत की ठोस तुलना देखी जा सकती है
यह टूल क्यों बनाया गया
- Opus 4.7 रिलीज़ घोषणा में इसे Opus 4.6 का सीधा upgrade बताया गया था, लेकिन token usage को प्रभावित करने वाले दो बदलाव मौजूद हैं
- अपडेट किए गए tokenizer की वजह से एक ही input, content type के अनुसार 1.0~1.35x tokens में map होता है
- उच्च effort level पर, खासकर agentic environment के बाद के turns में, मॉडल ज़्यादा सोचता है, जिससे output tokens बढ़ते हैं
- कठिन समस्याओं पर reliability बेहतर होती है, लेकिन इसका token-based cost structure पर सीधा असर पड़ता है
उपयोगकर्ताओं पर प्रभाव
- एक ही prompt text होने पर भी Opus 4.7 में ज़्यादा tokens के रूप में count किया जाता है, इसलिए शब्द बदले बिना भी प्रति request लागत बढ़ती है
- Tokenomics में कोई भी conversation, system prompt, text पेस्ट करके Opus 4.7 और 4.6 के token count अंतर को सीधे देखा जा सकता है
- मौजूदा pricing के आधार पर ठोस लागत अंतर निकाला जाता है
कम्युनिटी औसत पेज
/leaderboard पेज पर टूल उपयोगकर्ताओं के anonymous comparison data को aggregate किया जाता है
- अलग-अलग prompt types के अनुसार वास्तविक token वृद्धि दर का औसत real-world usage के आधार पर देखा जा सकता है
ध्यान देने योग्य बातें
- prompt text स्टोर नहीं किया जाता: input को browser में parse करने के बाद server पर भेजा जाता है और फिर Anthropic token counting API को forward किया जाता है; prompt text को DB में स्टोर नहीं किया जाता, केवल anonymous token count metrics सेव किए जाते हैं
- यह Anthropic का आधिकारिक product नहीं है: इसे Bill Chambers ने बनाया है और इसका Anthropic के साथ कोई affiliation, endorsement या sponsorship संबंध नहीं है
- open source: पूरा source code GitHub(
bllchmbrs/tokensmatter) पर उपलब्ध है, contributions और feedback का स्वागत है
कम्युनिटी औसत
- anonymous रूप से submit किए गए वास्तविक usage request comparisons के आधार पर, Opus 4.6 की तुलना में Opus 4.7 के request tokens और request cost अंतर का aggregation
- कुल 425 submissions के आधार पर संकलन
- हाल की comparison list हाल की 50 entries को newest-first क्रम में दिखाती है
- औसत request token परिवर्तन दर +37.4%
- औसत request cost परिवर्तन दर +37.4%
- औसत request size 369 / 495
- मूल पाठ में इन दो संख्याओं की अतिरिक्त व्याख्या नहीं दी गई है
हाल के anonymous comparison examples
- हाल की 50-entry तालिका में अधिकांश मामलों में Opus 4.7 request tokens वृद्धि और cost वृद्धि एक ही अनुपात में दर्ज हैं
- उदाहरण 1:
6b5d3ebf submission, request 23 → 31, cost $0.000345 → $0.000465, परिवर्तन दर +34.8%
- उदाहरण 2:
1363973a submission, request 99 → 130, cost $0.001485 → $0.001950, परिवर्तन दर +31.3%
- उदाहरण 3:
17a9645e submission, request 16 → 20, cost $0.000240 → $0.000300, परिवर्तन दर +25.0%
- छोटे requests में भी वृद्धि देखी गई
10c3149a submission, request 8 → 14, cost $0.000120 → $0.000210, परिवर्तन दर +75.0%
8f58e536 submission, request 8 → 13, cost $0.000120 → $0.000195, परिवर्तन दर +62.5%
942f5d38 submission, request 12 → 19, cost $0.000180 → $0.000285, परिवर्तन दर +58.3%
- मध्यम आकार के requests में भी इसी तरह की वृद्धि बार-बार दिखती है
67f5f437 submission, request 188 → 275, cost $0.002820 → $0.004125, परिवर्तन दर +46.3%
04249c86 submission, request 176 → 256, cost $0.002640 → $0.003840, परिवर्तन दर +45.5%
af25da70 submission, request 269 → 501, cost $0.004035 → $0.007515, परिवर्तन दर +86.2%
- बड़े requests में भी ऐसा ही वृद्धि pattern दिखता है
c5d75d71 submission, request 2,263 → 3,282, cost $0.0339 → $0.0492, परिवर्तन दर +45.0%
4db385b5 submission, request 1,592 → 2,205, cost $0.0239 → $0.0331, परिवर्तन दर +38.5%
68375705 submission, request 4,449 → 6,434, cost $0.0667 → $0.0965, परिवर्तन दर +44.6%
- कई submissions में समान संख्याएँ दोहराई गई हैं
- request 175 → 221, cost $0.002625 → $0.003315, परिवर्तन दर +26.3% वाला मामला कई submission IDs में दोहराया गया
- request 996 → 1,392, cost $0.0149 → $0.0209, परिवर्तन दर +39.8% वाला मामला कई submission IDs में दोहराया गया
- request 43 → 61, cost $0.000645 → $0.000915, परिवर्तन दर +41.9% वाला मामला कई submission IDs में दोहराया गया
अभी कोई टिप्पणी नहीं है.