#27 Step 3.7 Flash
medium- लागत
- $0.006
- समय
- 46.2s
- टोकन
- 4,466 tok
सारांश
Step 3.7 Flash AI BENCHY पर 8.0 स्कोर करता है और #27 पर है। इसकी reliability 9.9, pass rate 72.7%, कुल लागत $0.515, और औसत response time 26.37s है।
Step 3.7 Flash को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #2 है; जबकि संयुक्त इसकी सबसे कमजोर जगह है, जहाँ यह #18 पर है।
शोध की तारीख: 2026-08-12
8.0
संगति
8.9
9.9
$0.515
कुल आउटपुट टोकन
427,572
कुल इनपुट टोकन
114,062
इनपुट कीमत
$0.200 / 1M
आउटपुट कीमत
$1.150 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
गलत टेस्ट: 8
प्रति प्रयास पास दर: 72.7%
बेंचमार्क कवरेज: 64/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)
अस्थिर टेस्ट
3
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:31 दोबारा परीक्षण | 7.9 | 10.0 | $0.495 | तुलना करें | |
| 2026-07-16 22:50 नया टेस्ट जोड़ा गया | 8.0 | 9.9 | $0.515 | वर्तमान रन | |
| 2026-06-04 13:52 नया टेस्ट जोड़ा गया | 8.0 | 9.9 | $0.376 | तुलना करें | |
| 2026-05-29 11:49 पहला रन | 7.9 | 9.9 | $0.404 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-07-16 22:50 · नया टेस्ट जोड़ा गया | 64/66 प्रयास | 8.0 | 8.9 | 9.9 | 14/22 | 3 | 427,572 | 114,062 | $0.515 | 26.37s |
| 2026-05-29 11:49 · पहला रन | 60/60 प्रयास | 7.9 | 9.2 | 9.9 | 13/20 | 2 | 344,492 | 0 | $0.404 | 20.29s |
| अंतर | — | +0.1 | -0.3 | 0.0 | +1 | +1 | +83080 | +114062 | +$0.111 | +6085ms |
बेंचमार्क कवरेज अलग है: 64/66 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
कीमत का इतिहास
OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।
| तारीख | इनपुट कीमत | आउटपुट कीमत | कैश पढ़ने की कीमत | कैश लिखने की कीमत |
|---|---|---|---|---|
| 2026-06-04 15:40 | $0.200 / 1M | $1.150 / 1M | लागू नहीं | लागू नहीं |
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 8.7 | 7.9 | |
| कोडिंग | 8.8 | 7.8 | |
| संयुक्त | 7.3 | 5.8 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 7.7 | 10.0 | |
| Samanya Buddhimatta | 4.0 | 10.0 | |
| निर्देश पालन | 9.8 | 10.0 | |
| पहेली समाधान | 5.7 | 9.9 | |
| टूल कॉलिंग | 10.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |