#62 Step 3.5 Flash
medium- लागत
- $0.008
- समय
- 277.1s
- टोकन
- 23,695 tok
सारांश
Step 3.5 Flash AI BENCHY पर 7.2 स्कोर करता है और #62 पर है। इसकी reliability 8.9, pass rate 58.3%, कुल लागत $0.070, और औसत response time 72.53s है।
Step 3.5 Flash को अलग क्या बनाता है: यह डेटा पार्सिंग और निष्कर्षण में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि कोडिंग इसकी सबसे कमजोर जगह है, जहाँ यह #18 पर है। इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।
शोध की तारीख: 2026-08-12
7.2
संगति
9.1
8.9
कुल आउटपुट टोकन
287,560
कुल इनपुट टोकन
34,431
इनपुट कीमत
$0.090 / 1M
आउटपुट कीमत
$0.300 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
2
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:50 दोबारा परीक्षण | 5.9 | 10.0 | $0.132 ↑ | तुलना करें | |
| 2026-07-16 23:25 नया टेस्ट जोड़ा गया | 6.0 | 9.2 | $0.108 ↑ | तुलना करें | |
| 2026-06-04 14:12 नया टेस्ट जोड़ा गया | 7.2 | 8.9 | $0.070 ↑ | वर्तमान रन | |
| 2026-05-22 00:30 सूट बदला गया | 7.4 | 9.3 | $0.015 | तुलना करें | |
| 2026-05-08 15:30 सूट बदला गया | 7.6 | 10.0 | $0.011 | तुलना करें | |
| 2026-04-11 00:35 पहला दर्ज रन | 7.9 | लागू नहीं | $0.000 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-06-04 14:12 · नया टेस्ट जोड़ा गया | 60/60 प्रयास | 7.2 | 9.1 | 8.9 | 11/20 | 2 | 287,560 | 34,431 | $0.070 | 72.53s |
| 2026-05-08 15:30 · सूट बदला गया | 54/54 प्रयास | 7.6 | 9.2 | 10.0 | 11/18 | 2 | 251,708 | 0 | $0.011 | 41.66s |
| अंतर | — | -0.4 | -0.1 | -1.1 | 0 | 0 | +35852 | +34431 | +$0.059 | +30875ms |
बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
कीमत का इतिहास
OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।
| तारीख | इनपुट कीमत | आउटपुट कीमत | कैश पढ़ने की कीमत | कैश लिखने की कीमत |
|---|---|---|---|---|
| 2026-06-04 14:42 | $0.090 / 1M | $0.300 / 1M | लागू नहीं | लागू नहीं |
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 10.0 | 10.0 | |
| कोडिंग | 3.1 | 4.7 | |
| संयुक्त | 10.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 5.3 | 7.2 | |
| Samanya Buddhimatta | 5.5 | 10.0 | |
| निर्देश पालन | 8.3 | 10.0 | |
| पहेली समाधान | 5.3 | 10.0 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |