INTERPRETATION — टियर की सीमा खिसक गई। $2/$10 पर Sonnet 5.5 अब नॉलेज वर्क पर $4/$20 वाले Opus 5.5 के कुछ ही अंकों के भीतर है (GDPval-AA 1,844 बनाम 1,846; AA-Briefcase 1,811 बनाम 1,822), कंप्यूटर यूज़ पर (OSWorld 2.1 आंशिक 80.1% बनाम 81.8%), और लंबी-क्षितिज रीज़निंग पर (टूल्स के साथ HLE 64.5% बनाम 67.7%)। अनिश्चित डेवलपर्स के लिए Anthropic का मार्गदर्शन अब भी कहता है कि Opus 5.5 से शुरू करें, पर ऐसा करने का आर्थिक तर्क अब मुख्य रूप से खुले-अंत वाले काम पर लागू होता है जिसमें लगातार निर्णय-क्षमता चाहिए — रोज़ के प्रोडक्शन ट्रैफ़िक पर नहीं।
INDEPENDENT EVIDENCE — स्पीड का दावा टिकता है और कम आंक सकता है। Artificial Analysis Sonnet 5.5 को 132.2 आउटपुट टोकन/सेकंड मापता है, Sonnet 5 के 82.4 टोकन/सेकंड के मुक़ाबले — लगभग 60% तेज़, यानी Anthropic के "30%+ तेज़" से लगभग दोगुना। दोनों आंकड़े Anthropic की अपनी API पर उसी स्वतंत्र मूल्यांकनकर्ता से हैं, इसलिए तुलना लाइक-फ़ॉर-लाइक है। यह स्टोरी में सबसे मज़बूत स्वतंत्र पुष्टि है। ध्यान दें कि यह आउटपुट डिकोड रेट है, एंड-टू-एंड लेटेंसी नहीं: उसी मापन में max effort पर Sonnet 5.5 का टाइम-टू-फ़र्स्ट-टोकन (time-to-first-token) 428.36s है, क्योंकि जवाब से पहले अडैप्टिव थिंकिंग चलती है।
INDEPENDENT EVIDENCE — पर लागत की कहानी effort पर निर्भर है, और आंशिक रूप से खंडित। Artificial Analysis की प्रति Intelligence Index टास्क लागत:
| Effort | Sonnet 5.5 | Sonnet 5 | दिशा |
|---|
| low | $0.41 | — | Sonnet 5 से ~19% कम |
| medium (ऐप्स/Claude Code डिफ़ॉल्ट) | $0.59 | — | ~41% कम |
| high (API डिफ़ॉल्ट) | $1.08 | — | ~40% कम |
| xhigh | $2.74 | — | ~5% कम |
| max | $7.67 | $5.09 | ~51% अधिक |
max effort पर Sonnet 5.5 ने प्रति Index टास्क 192,800 आउटपुट टोकन इस्तेमाल किए, Sonnet 5 के 117,800 के मुक़ाबले। Intelligence Index स्कोर उस अतिरिक्त खर्च पर 38 से 56 हुआ। तो: ज़्यादातर प्रोडक्शन ट्रैफ़िक जिन सेटिंग्स पर चलता है, वहां बचत असली और बड़ी है, और हेडलाइन टिकाऊ है; effort रेंज के शीर्ष पर मॉडल ठोस रूप से ज़्यादा महंगा है, और उस वाक्य में Anthropic का "up to" असली काम कर रहा है।
INDEPENDENT EVIDENCE — एक हैंड्स-ऑन टेस्ट में कोई बचत नहीं मिली। DataCamp ने वही बिल्ड टास्क (FiveThirtyEight के college-majors डेटासेट से एक सिंगल-फ़ाइल HTML डैशबोर्ड) दोनों मॉडल्स पर चलाया। Sonnet 5.5 ने छोटे-नमूने की चेतावनियों के साथ चलता हुआ डैशबोर्ड दिया; Sonnet 5 ने खाली पेज दिया (उसकी चार्टिंग लाइब्रेरी के लिए टूटा CDN लिंक, ठीक न हो सकने वाली एरर)। पर प्रति रन लागत Sonnet 5.5 के लिए $0.56 बनाम Sonnet 5 के $0.57 थी — व्यावहारिक रूप से समान, और Sonnet 5.5 तेज़ी से पूरा हुआ। एक असली टास्क पर क्वालिटी का लाभ स्पष्ट था और लागत का लाभ शून्य। एक टास्क बेंचमार्क नहीं है, पर यह उस तंत्र की सीधी जांच है जिस पर दावा टिका है, और इसने उसे दोहराया नहीं।
COMPANY CLAIM — ग्राहकों के बताए एफ़िशिएंसी लाभ। Anthropic की लॉन्च पोस्ट उद्धृत करती है: Base44 प्रति ऐप बिल्ड 3.6 इटरेशन बताता है, Opus 5 के साथ 7.7 के मुक़ाबले; Box वर्कलोड 2.4x तेज़ बताता है, 12% कम टोकन के साथ; Zendesk टिकट प्रोसेसिंग 20% तेज़ मापता है; Atlassian कहता है कि ग्राहक Rovo Agents को 30% तक तेज़ चला सकते हैं; Slack ऑफ़लाइन Slackbot इवैल्स पर लगभग 14% कम आउटपुट टोकन बताता है, प्रॉम्प्ट अपरिवर्तित रहने पर; Epic Games दसियों हज़ार पंक्तियों पर कई घंटे के गेमप्ले-सिस्टम आर्किटेक्चर काम का वर्णन करता है। ये विक्रेता द्वारा चुने गए टेस्टिमोनियल हैं और इन्हें वैसे ही लेबल किया गया है।
INTERPRETATION — बेंचमार्क की छलांग दिशा में असली है, परिमाण में नरम। दो स्वतंत्र हार्नेस सहमत हैं कि मॉडल टर्मिनल एजेंटिक काम में Sonnet 5 से नाटकीय रूप से बेहतर है और वहां कम से कम Opus 5.5 जितना अच्छा है। पर 70.6% का आंकड़ा Anthropic का अपना रन है, Claude Code में, max effort पर, Opus 5.5 के xhigh पर सर्वश्रेष्ठ के मुक़ाबले; सिस्टम कार्ड की अपनी स्टैंडर्ड एरर ±2.5 और ±2.6 अंक हैं, और Anthropic उस अंतर के लिए कोई सांख्यिकीय महत्व नहीं बताता (AI Tools Police के pp.112-113 पढ़ने के अनुसार)। Artificial Analysis का स्वतंत्र रन — अलग हार्नेस, दोनों मॉडल max पर — 63.6% बनाम 59.6% देता है, जो Anthropic के निरपेक्ष आंकड़े से लगभग 7 अंक नीचे है पर क्रम बनाए रखता है। 10.3% का Sonnet 5 बेसलाइन बाहरी रूप से पुष्ट है (Artificial Analysis max पर 14.1%; Zapier 10.65%), इसलिए सुधार का आकार अच्छी तरह समर्थित है, भले ही हेडलाइन आंकड़ा हार्नेस-विशिष्ट हो।