#295

Nemotron 3.5 Lightning

NVIDIA प्रकाशन: 2026-08-11 चाचणी तारीख: 2026-08-14 03:49 nvidia/nemotron-3.5-lightning::medium

30B एकूण (3B सक्रिय)MoEवेट्स उपलब्ध

(high) (medium) (low) (none)

सारांश

Nemotron 3.5 Lightning AI BENCHY वर 5.1 स्कोर करते आणि #295 वर आहे. याची reliability 9.9, pass rate 48.5%, एकूण खर्च $0.156, आणि सरासरी response time 70.11s आहे.

Nemotron 3.5 Lightning खास का आहे: हे सूचनांचे पालन मध्ये सर्वाधिक उठून दिसते, जिथे त्याचा rank #1 आहे; तर डेटा पार्सिंग आणि निष्कर्षण हा सर्वात कमकुवत भाग आहे, rank #15. हे असामान्यपणे जास्त reasoning tokens वापरते, ज्यामुळे runs हळू किंवा महाग होऊ शकतात.

मॉडेलची माहिती

संशोधन दिनांक: 2026-08-12

जाहीर केलेले

पॅरामीटर्स: 30B एकूण (3B सक्रिय)
आर्किटेक्चर: MoE
उपलब्धता: वेट्स उपलब्ध
परवाना: NVIDIA Open Model

पॅरामीटर स्रोत उपलब्धता स्रोत

स्कोअर

5.1

सुसंगतता

6.0

विश्वसनीयता

9.9

एकूण खर्च (सध्याची किंमत)

$0.156 ↕ New

या किमतीवर चाचणी केली: $0.000

एकूण आउटपुट टोकन्स

760,441

एकूण इनपुट टोकन्स

126,330

इनपुट किंमत

$0.080 / 1M

आउटपुट किंमत

$0.200 / 1M

बरोबर चाचण्या

चुकीच्या चाचण्या: 17

प्रति प्रयत्न पास दर: 48.5%

अस्थिर चाचण्या

अस्थिर चाचण्यांत रन्समध्ये मिश्र निकाल असतात (किमान एक पास आणि एक फेल).

प्रतिसाद वेळ (सरासरी)

70.11s

प्रतिसाद वेळ (कमाल): 437.11s

प्रतिसाद वेळ (एकूण): 1542.52s

चुकीचे उत्तर: 13 सूचनांचे पालन केले नाही: 3 अवैध टूल कॉल: 1

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#295 Nemotron 3.5 Lightning

medium

खर्च: $0.000
वेळ: 130.5s
टोकन्स: 6,750 tok

रन इतिहास

चाचणी तारीख	स्कोअर	विश्वसनीयता	बरोबर चाचण्या	एकूण खर्च	तुलना करा
2026-08-14 03:49 पुन्हा चाचणी	5.1	9.9		$0.156