ナビゲーション
Advertise here

Seed-2.0-Code vs Mistral Small 4 (medium)

Seed-2.0-Code が平均スコアでリードし、5.3 vs 5.1 です。 Mistral Small 4 (medium) の benchmark コストが低く、$0.097 vs $0.151 です。 Mistral Small 4 (medium) の方が高速で、10.80s vs 14.67s です、成功率は 36.4% vs 43.9% です。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-09-24

比較対象モデル

順位
#288
合計出力トークン
23,433
応答時間(平均)
14.67s
合計コスト
$0.151
順位
#297
合計出力トークン
133,597
応答時間(平均)
10.80s
合計コスト
$0.097
おすすめモデル Mistral Small 4 (medium)

スコアはここでの最高値に近く(5.1 vs 5.3)、Seed-2.0-Code より約 1.6 倍低コストです。

詳細比較

指標 Seed-2.0-Code Seed-2.0-Code none リリース: 2026-08-12 Mistral Small 4 Mistral Small 4 medium リリース: 2026-03-16
スコア 5.3 5.1
順位 #288 #297
信頼性 8.6 10.0
一貫性 8.1 7.0
試行回数 66/66 66/66
正解テスト
試行ごとの合格率 36.4% 43.9%
不安定なテスト 5 8
総実行回数 66 66
結果あたりのコスト 2.503 1.923
合計コスト $0.151 $0.097
入力価格 $0.500 / 1M $0.150 / 1M
出力価格 $3.000 / 1M $0.600 / 1M
合計入力トークン 159,749 140,559
出力トークン 23,433 40,268
推論トークン 0 93,329
応答時間(平均) 14.67s 10.80s
応答時間(最大) 132.84s 59.15s
応答時間(合計) 322.71s 237.60s
パラメータ ~200B 総数 (~20B アクティブ) 119B 総数 (6B アクティブ)
公開状況 クローズド オープンソース

モデル生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#288 Seed-2.0-Code

none
コスト
$0.030
時間
140.6s
トークン
9,924 tok

#297 Mistral Small 4

medium
コスト
$0.006
時間
47.9s
トークン
9,857 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Seed-2.0-Code 3.6 9.8 0.0% 0 13.42s 7,230 505 0
Mistral Small 4 4.4 5.1 33.3% 2 39.98s 7,636 11,635 54,715

クイック比較

比較ペアを切り替え