AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#158

LFM2-24B-A2B

Liquid रिलीज़: 2026-02-24 परीक्षण किया गया: 2026-05-06 14:04 liquid/lfm-2-24b-a2b::none
24B कुल (2.3B सक्रिय)MoEवेट उपलब्ध

सारांश

LFM2-24B-A2B AI BENCHY पर 4.2 स्कोर करता है और #158 पर है। इसकी reliability लागू नहीं, pass rate 16.7%, कुल लागत $0.001, और औसत response time 782ms है।

LFM2-24B-A2B को अलग क्या बनाता है: यह डोमेन-विशिष्ट में सबसे अलग दिखता है, जहाँ इसकी रैंक #3 है; जबकि एंटी-एआई ट्रिक्स इसकी सबसे कमजोर जगह है, जहाँ यह #15 पर है। यह समान मॉडलों की तुलना में काफ़ी तेज है।

संग्रहीत मॉडल: इस मॉडल को अब अपडेट नहीं किया जाएगा और नए परीक्षणों में टेस्ट नहीं किया जाएगा।

मॉडल विवरण

शोध की तारीख: 2026-08-12

घोषित
पैरामीटर
24B कुल (2.3B सक्रिय)
आर्किटेक्चर
MoE
उपलब्धता
वेट उपलब्ध
लाइसेंस
LFM-1.0

संगति

9.4

विश्वसनीयता

लागू नहीं

कुल आउटपुट टोकन

1,173

कुल इनपुट टोकन

10,771

इनपुट कीमत

$0.030 / 1M

आउटपुट कीमत

$0.120 / 1M

सही परीक्षण

गलत टेस्ट: 14

प्रति प्रयास पास दर: 16.7%

अस्थिर टेस्ट

1

अस्थिर टेस्ट में रनों के बीच मिले-जुले परिणाम रहे (कम से कम एक पास और एक फेल)।

प्रतिक्रिया समय (औसत)

782ms

प्रतिक्रिया समय (अधिकतम): 3.15s

प्रतिक्रिया समय (कुल): 10.94s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#158 LiquidAI: LFM2-24B-A2B

none
अमान्य SVG
लागत
$0.000
समय
300.0s
टोकन
0 tok

रन इतिहास

परीक्षण किया गया स्कोर विश्वसनीयता सही परीक्षण कुल लागत तुलना करें
2026-05-06 14:04 दोबारा परीक्षण 2.2 लागू नहीं $0.001 तुलना करें
2026-05-06 14:04 दोबारा परीक्षण 2.2 लागू नहीं $0.001 तुलना करें
2026-05-06 14:04 दोबारा परीक्षण 4.2 लागू नहीं $0.001 वर्तमान रन
2026-05-06 14:04 दोबारा परीक्षण 4.2 लागू नहीं $0.001 तुलना करें
2026-05-06 14:04 सूट बदला गया 4.2 लागू नहीं $0.001 तुलना करें
2026-04-10 23:27 पहला दर्ज रन 4.1 लागू नहीं $0.001 तुलना करें

रन तुलना

रनबेंचमार्क कवरेजस्कोरसंगतिविश्वसनीयतासही परीक्षणअस्थिर टेस्टकुल आउटपुट टोकनकुल इनपुट टोकनकुल लागतप्रतिक्रिया समय (औसत)
2026-05-06 14:04 · दोबारा परीक्षण48/48 प्रयास4.29.4लागू नहीं2/1611,17310,771$0.001782ms
2026-04-10 23:27 · पहला दर्ज रन48/48 प्रयास4.19.0लागू नहीं1/1621,1850$0.001811ms
अंतर+0.1+0.4+1-1-12+10771-$0.001-29ms

इन दो रन में अलग-अलग बेंचमार्क सूट इस्तेमाल हुए थे, इसलिए अंतर मॉडल बदलाव और सूट बदलाव दोनों को दर्शाते हैं।

कीमत का इतिहास

OpenRouter से इस मॉडल का ऐतिहासिक मूल्य डेटा।

तारीख इनपुट कीमत आउटपुट कीमत
2026-06-04 14:42 $0.030 / 1M $0.120 / 1M

चार्ट

पहले मॉडल चुनें, फिर दूसरा मॉडल क्लिक करके साइड-बाय-साइड पेज खोलें।

कुल आउटपुट टोकन

स्कोर vs कुल आउटपुट टोकन

श्रेणी विवरण

श्रेणी स्कोर संगति सही परीक्षण
एंटी-एआई ट्रिक्स 3.3 9.8
संयुक्त 3.0 10.0
डेटा पार्सिंग और निष्कर्षण 3.0 10.0
डोमेन-विशिष्ट 5.9 7.2
Samanya Buddhimatta 4.0 10.0
निर्देश पालन 6.3 10.0
पहेली समाधान 3.8 10.0
टूल कॉलिंग 3.0 10.0

तुलना किए गए मॉडल