ナビゲーション
AI BENCHY
Advertise here

AI BENCHY Compare

ByteDance Seed: Seed-2.0-Lite vs Inception: Mercury 2

概要

Seed-2.0-Lite vs Mercury 2 の benchmark 比較: Mercury 2 が平均スコアでリードし、6.6 vs 5.8 です。 Seed-2.0-Lite の benchmark コストが低く、$0.019 vs $0.058 です。 Mercury 2 の方が高速で、2.24s vs 2.49s です、成功率は 46.0% vs 54.0% です。

おすすめモデル: Seed-2.0-Lite - 総合的に最も良い選択です。競争力のあるスコア(5.8)、Mercury 2 より低いコスト、バランスの取れた応答時間があります。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-06-10

指標 Seed-2.0-Lite Seed-2.0-Lite none リリース: 2026-02-14 Mercury 2 Mercury 2 medium リリース: 2026-02-24
スコア 5.8 6.6
順位 #111 #82
信頼性 10.0 10.0
一貫性 8.4 8.8
正解テスト
試行ごとの合格率 46.0% 54.0%
不安定なテスト 4 3
総実行回数 63 63
結果あたりのコスト 0.228 0.578
合計コスト $0.019 $0.058
入力価格 $0.250 / 1M $0.250 / 1M
出力価格 $2.000 / 1M $0.750 / 1M
合計入力トークン 46,573 35,116
出力トークン 3,259 4,048
推論トークン 0 61,219
応答時間(平均) 2.49s 2.24s
応答時間(最大) 6.70s 14.63s
応答時間(合計) 52.26s 44.72s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#111 Seed-2.0-Lite

none
Cost
$0.005
Time
83.8s
Tokens
2,311 tok

#82 Mercury 2

medium
Cost
$0.002
Time
2.1s
Tokens
1,702 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Seed-2.0-Lite 3.0 5.9 16.7% 2 2.43s 894 709 0
Mercury 2 6.9 9.9 50.0% 0 1.12s 554 2,546 2,609
コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Seed-2.0-Lite 5.6 10.0 33.3% 0 2.83s 8,215 410 0
Mercury 2 8.2 7.7 77.8% 1 2.04s 7,065 296 11,328
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Seed-2.0-Lite 3.0 10.0 0.0% 0 6.59s 16,215 498 0
Mercury 2 10.0 10.0 100.0% 0 3.28s 12,909 268 4,887
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Seed-2.0-Lite 10.0 10.0 100.0% 0 1.82s 8,538 246 0
Mercury 2 7.3 5.9 83.3% 1 1.11s 6,234 183 1,656
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Seed-2.0-Lite 3.6 7.2 22.2% 1 1.33s 939 17 0
Mercury 2 2.9 7.2 11.1% 1 6.48s 695 41 30,754
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Seed-2.0-Lite 10.0 10.0 100.0% 0 3.45s 570 294 0
Mercury 2 4.8 10.0 0.0% 0 821ms 456 137 542
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Seed-2.0-Lite 10.0 10.0 100.0% 0 1.06s 810 73 0
Mercury 2 10.0 10.0 100.0% 0 1.07s 340 14 958
パズル解決 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Seed-2.0-Lite 5.3 7.2 44.4% 1 2.78s 858 709 0
Mercury 2 5.4 10.0 33.3% 0 949ms 601 361 2,781
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Seed-2.0-Lite 10.0 10.0 100.0% 0 3.94s 9,270 292 0
Mercury 2 10.0 10.0 100.0% 0 1.89s 6,080 180 1,956
雑学 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Seed-2.0-Lite 3.0 10.0 0.0% 0 1.96s 264 11 0
Mercury 2 3.0 10.0 0.0% 0 2.58s 182 22 3,748

クイック比較

比較ペアを切り替え