#24 Gemma 4 31B
medium- लागत
- $0.002
- समय
- 45.7s
- टोकन
- 2,696 tok
सारांश
Gemma 4 31B AI BENCHY पर 8.0 स्कोर करता है और #24 पर है। इसकी reliability 6.7, pass rate 75.0%, कुल लागत $0.029, और औसत response time 35.51s है।
Gemma 4 31B को अलग क्या बनाता है: इस score range के लिए इसकी कुल benchmark लागत असामान्य रूप से कम है।
शोध की तारीख: 2026-08-12
8.0
संगति
9.2
6.7
$0.029
कुल आउटपुट टोकन
69,291
कुल इनपुट टोकन
0
इनपुट कीमत
$0.120 / 1M
आउटपुट कीमत
$0.370 / 1M
कैश पढ़ने की कीमत
लागू नहीं
कैश लिखने की कीमत
लागू नहीं
कैश की कीमतें इनपुट टोकन पर लागू होती हैं। पढ़ने पर कैश किए गए प्रॉम्प्ट का दोबारा उपयोग होता है; लिखने पर वे सहेजे जाते हैं और अतिरिक्त लागत हो सकती है। आउटपुट टोकन पर आउटपुट की कीमत लागू होती है।
अस्थिर टेस्ट
2
अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
रन इतिहास
| परीक्षण किया गया | स्कोर | विश्वसनीयता | सही परीक्षण | कुल लागत | तुलना करें |
|---|---|---|---|---|---|
| 2026-08-14 02:55 दोबारा परीक्षण | 6.2 | 10.0 | $0.101 ↓ | तुलना करें | |
| 2026-07-16 23:24 नया टेस्ट जोड़ा गया | 6.3 | 10.0 | $0.163 ↑ | तुलना करें | |
| 2026-06-04 14:27 नया टेस्ट जोड़ा गया | 7.9 | 8.9 | $0.035 ↓ | तुलना करें | |
| 2026-05-22 00:35 सूट बदला गया | 8.0 | 6.7 | $0.029 | वर्तमान रन | |
| 2026-04-14 00:56 पहला दर्ज रन | 8.3 | लागू नहीं | $0.018 | तुलना करें |
इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।
रन तुलना
| रन | बेंचमार्क कवरेज | स्कोर | संगति | विश्वसनीयता | सही परीक्षण | अस्थिर टेस्ट | कुल आउटपुट टोकन | कुल इनपुट टोकन | कुल लागत | प्रतिक्रिया समय (औसत) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:35 · सूट बदला गया | 60/60 प्रयास | 8.0 | 9.2 | 6.7 | 14/20 | 2 | 69,291 | 0 | $0.029 | 35.51s |
| 2026-04-14 00:56 · पहला दर्ज रन | 54/54 प्रयास | 8.3 | 9.2 | लागू नहीं | 13/18 | 2 | 40,684 | 0 | $0.018 | 24.88s |
| अंतर | — | -0.4 | 0.0 | +1 | 0 | +28607 | 0 | +$0.012 | +10626ms |
बेंचमार्क कवरेज अलग है: 60/60 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव) बनाम 54/54 प्रयास (लक्ष्य: प्रति टेस्ट 3 दोहराव)। कुल और दोहराव-संवेदनशील मेट्रिक सीधे तुलना योग्य नहीं हैं।
इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।
पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।
| श्रेणी | स्कोर | संगति | सही परीक्षण |
|---|---|---|---|
| एंटी-एआई ट्रिक्स | 10.0 | 10.0 | |
| कोडिंग | 3.8 | 1.6 | |
| संयुक्त | 3.0 | 10.0 | |
| डेटा पार्सिंग और निष्कर्षण | 10.0 | 10.0 | |
| डोमेन-विशिष्ट | 7.7 | 10.0 | |
| Samanya Buddhimatta | 10.0 | 10.0 | |
| निर्देश पालन | 10.0 | 10.0 | |
| पहेली समाधान | 9.9 | 10.0 | |
| टूल कॉलिंग | 3.0 | 10.0 | |
| सामान्य ज्ञान | 3.0 | 10.0 |