ナビゲーション
AI BENCHY
Advertise here

AI BENCHY Compare

Anthropic: Claude Opus 4.8 vs Z.ai: GLM 5.1

概要

Claude Opus 4.8 vs GLM 5.1 (medium) の benchmark 比較: Claude Opus 4.8 が平均スコアでリードし、7.2 vs 7.1 です。 GLM 5.1 (medium) の benchmark コストが低く、$0.288 vs $0.539 です。 Claude Opus 4.8 の方が高速で、3.48s vs 33.67s です、成功率は 61.9% vs 68.3% です。

おすすめモデル: Claude Opus 4.8 - ここでは最高スコア(7.2)で、GLM 5.1 (medium) より約 9.7 倍速く応答します。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-07-10

指標 Claude Opus 4.8 Claude Opus 4.8 none リリース: 2026-05-28 GLM 5.1 GLM 5.1 medium リリース: 2026-04-07
スコア 7.2 7.1
順位 #70 #77
信頼性 10.0 6.7
一貫性 9.2 8.3
正解テスト
試行ごとの合格率 61.9% 68.3%
不安定なテスト 2 4
総実行回数 63 63
結果あたりのコスト 4.485 2.496
合計コスト $0.539 $0.288
入力価格 $5.000 / 1M $0.966 / 1M
出力価格 $25.000 / 1M $3.036 / 1M
合計入力トークン 67,104 32,995
出力トークン 8,107 11,655
推論トークン 0 75,421
応答時間(平均) 3.48s 33.67s
応答時間(最大) 17.73s 172.60s
応答時間(合計) 73.00s 673.41s

生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#70 Claude Opus 4.8

none
コスト
$0.053
時間
22.0s
トークン
2,253 tok

#77 GLM 5.1

medium
無効なSVG
コスト
$0.000
時間
300.0s
トークン
0 tok

スコア上位モデル

スコア vs 総コスト

応答時間(平均)

スコア vs 応答時間(平均)

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 6.5 10.0 50.0% 0 3.40s 834 1,472 0
GLM 5.1 10.0 10.0 100.0% 0 8.31s 555 401 5,122
コーディング スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 5.5 10.0 33.3% 0 3.29s 10,590 1,332 0
GLM 5.1 4.6 3.7 44.5% 2 109.63s 5,702 4,871 37,826
複合 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 9.5 10.0 100.0% 0 17.73s 29,658 3,259 0
GLM 5.1 9.5 10.0 100.0% 0 43.11s 17,298 327 4,206
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 7.3 5.8 83.3% 1 1.77s 10,503 308 0
GLM 5.1 10.0 10.0 100.0% 0 9.33s 7,107 991 4,552
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 5.3 7.2 44.4% 1 1.70s 975 61 0
GLM 5.1 5.3 10.0 33.3% 0 29.77s 489 969 11,314
汎用知能 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 10.0 10.0 100.0% 0 3.48s 708 230 0
GLM 5.1 10.0 10.0 100.0% 0 20.95s 477 2,875 2,875
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 9.9 10.0 100.0% 0 1.37s 909 95 0
GLM 5.1 6.4 5.8 66.7% 1 7.47s 634 204 1,617
パズル解決 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 7.7 10.0 66.7% 0 2.74s 894 783 0
GLM 5.1 8.2 7.2 88.9% 1 31.64s 609 935 5,730
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 10.0 10.0 100.0% 0 5.35s 11,775 355 0
GLM 5.1 3.0 10.0 0.0% 0 0ms 0 0 0
雑学 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 応答時間(平均) 入力トークン 出力トークン 推論トークン
Claude Opus 4.8 3.0 10.0 0.0% 0 3.41s 258 212 0
GLM 5.1 3.0 10.0 0.0% 0 29.40s 124 82 2,179

クイック比較

比較ペアを切り替え