AI BENCHY
Advertise here
#148

Grok 4.1 Fast

X AI रिलीज़: 2025-11-19 परीक्षण किया गया: 2026-05-08 13:50 x-ai/grok-4.1-fast::none
(medium) (none)

सारांश

Grok 4.1 Fast AI BENCHY पर 4.4 स्कोर करता है और #148 पर है। इसकी reliability 10.0, pass rate 22.8%, कुल लागत $0.009, और औसत response time 1.67s है।

Grok 4.1 Fast को अलग क्या बनाता है: यह कोडिंग में सबसे अलग दिखता है, जहाँ इसकी रैंक #1 है; जबकि निर्देश पालन इसकी सबसे कमजोर जगह है, जहाँ यह #14 पर है।

संग्रहीत मॉडल: इस मॉडल को अब अपडेट नहीं किया जाएगा और नए परीक्षणों में टेस्ट नहीं किया जाएगा।

संगति

8.8

कुल आउटपुट टोकन

1,733

कुल इनपुट टोकन

0

इनपुट कीमत

$0.000 / 1M

आउटपुट कीमत

$0.000 / 1M

सही परीक्षण

गलत टेस्ट: 16

प्रति प्रयास पास दर: 22.8%

अस्थिर टेस्ट

3

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

1.67s

प्रतिक्रिया समय (अधिकतम): 5.51s

प्रतिक्रिया समय (कुल): 20.08s

जनरेशन शोकेस

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#148 Grok 4.1 Fast

none
Grok 4.1 Fast is deprecated. xAI recommends switching to Grok 4.3 (https://openrouter.ai/x-ai/grok-4.3)
लागत
$0.000
समय
0.1s
टोकन
0 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-05-08 13:50 दोबारा परीक्षण 4.4 10.0 $0.008 तुलना करें
2026-05-08 13:50 दोबारा परीक्षण 4.4 10.0 $0.009 तुलना करें
2026-05-08 13:50 सूट बदला गया 4.4 10.0 $0.009 वर्तमान रन
2026-04-11 01:44 पहला दर्ज रन 4.5 लागू नहीं $0.009 तुलना करें

इस रन में अलग बेंचमार्क सूट इस्तेमाल हुआ था। ऐतिहासिक बदलाव पढ़ते समय सूट बदलाव को ध्यान में रखें।

रन तुलना

रनस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-05-08 13:50 · सूट बदला गया4.48.810.03/1931,7330$0.0091.67s
2026-04-11 01:44 · पहला दर्ज रन4.58.7लागू नहीं3/1831,7210$0.0091.76s
अंतर-0.1+0.100+120+$0.001-86ms

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

त्वरित तुलना

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 3.2 10.0
कोडिंग 5.3 3.4
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 10.0 10.0
डोमेन-विशिष्ट 5.9 7.2
Samanya Buddhimatta 4.4 9.9
निर्देश पालन 3.0 10.0
पहेली समाधान 3.0 10.0
टूल कॉलिंग 2.8 1.6
सामान्य ज्ञान 3.0 10.0

तुलना किए गए मॉडल