ナビゲーション
AI BENCHY
Advertise here

AI BENCHY Compare

Inception: Mercury 2 vs Qwen: Qwen3.6 27B

概要

Mercury 2 vs Qwen3.6 27B の benchmark 比較: Mercury 2 が平均スコアでリードし、6.6 vs 5.6 です。 Qwen3.6 27B の benchmark コストが低く、$0.025 vs $0.058 です。 Mercury 2 の方が高速で、2.24s vs 3.72s です、成功率は 54.0% vs 47.6% です。

おすすめモデル: Mercury 2 - ここでは最高スコア(6.6)で、Qwen3.6 27B より約 1.7 倍速く応答します。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-06-10

指標 Mercury 2 Mercury 2 medium リリース: 2026-02-24 Qwen3.6 27B Qwen3.6 27B none リリース: 2026-04-20
スコア 6.6 5.6
順位 #82 #119
信頼性 10.0 10.0
一貫性 8.8 7.6
正解テスト
試行ごとの合格率 54.0% 47.6%
不安定なテスト 3 6
総実行回数 63 63
結果あたりのコスト 0.578 0.467
合計コスト $0.058 $0.025
入力価格 $0.250 / 1M $0.290 / 1M
出力価格 $0.750 / 1M $2.400 / 1M
合計入力トークン 35,116 52,721
出力トークン 4,048 3,812
推論トークン 61,219 0
応答時間(平均) 2.24s 3.72s
応答時間(最大) 14.63s 11.82s
応答時間(合計) 44.72s 78.08s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#82 Mercury 2

medium
Cost
$0.002
Time
2.1s
Tokens
1,702 tok

#119 Qwen3.6 27B

none
Cost
$0.009
Time
83.0s
Tokens
4,549 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 6.9 9.9 50.0% 0 1.12s 554 2,546 2,609
Qwen3.6 27B 3.8 3.7 41.7% 3 2.83s 696 490 0
コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 8.2 7.7 77.8% 1 2.04s 7,065 296 11,328
Qwen3.6 27B 5.5 10.0 33.3% 0 4.16s 7,913 539 0
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 10.0 10.0 100.0% 0 3.28s 12,909 268 4,887
Qwen3.6 27B 3.0 10.0 0.0% 0 9.95s 22,497 1,401 0
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 7.3 5.9 83.3% 1 1.11s 6,234 183 1,656
Qwen3.6 27B 7.3 5.8 83.3% 1 2.06s 7,788 248 0
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 2.9 7.2 11.1% 1 6.48s 695 41 30,754
Qwen3.6 27B 7.7 10.0 66.7% 0 3.03s 789 24 0
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 4.8 10.0 0.0% 0 821ms 456 137 542
Qwen3.6 27B 5.2 9.9 0.0% 0 1.07s 522 72 0
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 10.0 10.0 100.0% 0 1.07s 340 14 958
Qwen3.6 27B 6.2 5.8 66.7% 1 1.92s 711 49 0
パズル解決 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 5.4 10.0 33.3% 0 949ms 601 361 2,781
Qwen3.6 27B 5.3 7.2 44.4% 1 5.15s 714 639 0
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 10.0 10.0 100.0% 0 1.89s 6,080 180 1,956
Qwen3.6 27B 9.5 10.0 100.0% 0 6.74s 10,881 339 0
雑学 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Mercury 2 3.0 10.0 0.0% 0 2.58s 182 22 3,748
Qwen3.6 27B 3.0 10.0 0.0% 0 4.03s 210 11 0

クイック比較

比較ペアを切り替え