ナビゲーション
AI BENCHY
Advertise here

AI BENCHY Compare

Inception: Mercury 2 vs Elephant Alpha

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-05-29

指標 Mercury 2 Mercury 2 medium リリース: 2026-02-24 Elephant Alpha Elephant Alpha none リリース: 2026-04-14
スコア 6.5 5.2
順位 #92 #136
信頼性 10.0 該当なし
一貫性 8.8 9.6
正解テスト
試行ごとの合格率 51.7% 29.8%
不安定なテスト 3 1
総実行回数 60 60
結果あたりのコスト 0.611 0.000
合計コスト $0.055 $0.000
入力価格 $0.250 / 1M $0.000 / 1M
出力価格 $0.750 / 1M $0.000 / 1M
出力トークン 4,022 2,573
推論トークン 58,405 0
応答時間(平均) 2.27s 1.22s
応答時間(最大) 14.63s 3.81s
応答時間(合計) 43.20s 22.03s

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 6.9 9.9 50.0% 0 1.12s 2,546 2,609
Elephant Alpha 6.6 10.0 50.0% 0 963ms 610 0
コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 7.2 6.5 66.7% 1 2.29s 270 8,514
Elephant Alpha 4.7 6.7 33.3% 1 1.39s 375 0
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 10.0 10.0 100.0% 0 3.28s 268 4,887
Elephant Alpha 3.0 10.0 0.0% 0 3.81s 731 0
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 7.3 5.9 83.3% 1 1.11s 183 1,656
Elephant Alpha 6.5 10.0 50.0% 0 1.04s 246 0
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 2.9 7.2 11.1% 1 6.48s 41 30,754
Elephant Alpha 3.0 10.0 0.0% 0 927ms 24 0
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 4.8 10.0 0.0% 0 821ms 137 542
Elephant Alpha 4.0 10.0 0.0% 0 854ms 106 0
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 10.0 10.0 100.0% 0 1.07s 14 958
Elephant Alpha 9.8 10.0 100.0% 0 1.03s 81 0
パズル解決 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 5.4 10.0 33.3% 0 949ms 361 2,781
Elephant Alpha 4.2 10.0 0.0% 0 807ms 170 0
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 10.0 10.0 100.0% 0 1.89s 180 1,956
Elephant Alpha 3.0 10.0 0.0% 0 2.79s 230 0
雑学 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 出力トークン 推論トークン
Mercury 2 3.0 10.0 0.0% 0 2.58s 22 3,748
Elephant Alpha 0.0 0.0 0.0% 0 0ms 0 0

クイック比較

比較ペアを切り替え