AI BENCHY Compare
Google: Gemini 3.1 Flash Lite Preview vs Z.ai: GLM 5
比較する:
ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-03-03
| 指標 | Google: Gemini 3.1 Flash Lite Preview none リリース: 2026-03-03 | Z.ai: GLM 5 medium リリース: 2026-02-12 |
|---|---|---|
| 順位 | #10 | #13 |
| 平均スコア | 7.70 | 7.29 |
| 一貫性 | 9.54 | 8.18 |
| 結果あたりのコスト | 0.116 | 1.196 |
| 合計コスト | $0.011 | $0.120 |
| 正解テスト | ||
| 試行ごとの合格率 | 69.1% | 83.3% |
| 不安定なテスト | 1 | 3 |
| 出力トークン | 4,307 | 15,923 |
| 推論トークン | 0 | 42,557 |
スコア vs 総コスト
カテゴリ内訳
| 反AIトリック | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|
| Google: Gemini 3.1 Flash Lite Preview | 6.00 | 7.85 | 55.6% | 1 | 1,086 | 0 | |
| Z.ai: GLM 5 | 10.00 | 10.00 | 100.0% | 0 | 420 | 4,992 |
| データ解析と抽出 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|
| Google: Gemini 3.1 Flash Lite Preview | 9.88 | 10.00 | 100.0% | 0 | 399 | 0 | |
| Z.ai: GLM 5 | 5.00 | 5.62 | 83.3% | 1 | 567 | 3,734 |
| ドメイン特化 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|
| Google: Gemini 3.1 Flash Lite Preview | 4.00 | 10.00 | 33.3% | 0 | 568 | 0 | |
| Z.ai: GLM 5 | 1.00 | 4.41 | 33.3% | 2 | 14,404 | 24,570 |
| 指示追従 | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|
| Google: Gemini 3.1 Flash Lite Preview | 9.00 | 10.00 | 50.0% | 0 | 574 | 0 | |
| Z.ai: GLM 5 | 9.50 | 9.99 | 100.0% | 0 | 140 | 2,740 |
| Puzzle Solving | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|
| Google: Gemini 3.1 Flash Lite Preview | 10.00 | 10.00 | 100.0% | 0 | 898 | 0 | |
| Z.ai: GLM 5 | 10.00 | 10.00 | 100.0% | 0 | 159 | 5,527 |
| ツール呼び出し | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|
| Google: Gemini 3.1 Flash Lite Preview | 10.00 | 10.00 | 100.0% | 0 | 782 | 0 | |
| Z.ai: GLM 5 | 10.00 | 10.00 | 100.0% | 0 | 233 | 994 |
クイック比較
比較ペアを切り替え
GPT-5.3 ChatnonevsGLM 5mediumGemini 3 Flash PreviewnonevsGLM 5mediumGPT-5.2 ChatnonevsGLM 5mediumGemini 3.1 Flash Lite PreviewnonevsGPT-5.3-CodexmediumClaude Sonnet 4.6mediumvsGemini 3.1 Flash Lite PreviewnoneGemini 3.1 Flash Lite PreviewhighvsGLM 5mediumGemini 3.1 Flash Lite PreviewlowvsGLM 5mediumGemini 3.1 Flash Lite PreviewnonevsStep 3.5 Flashmedium無料で利用可能DeepSeek V3.2mediumvsGemini 3.1 Flash Lite PreviewnoneGemini 3.1 Flash Lite PreviewnonevsGPT-5.2mediumGemini 3.1 Flash Lite PreviewnonevsQwen3.5-27BmediumGemini 3.1 Flash Lite PreviewnonevsQwen3.5-122B-A10Bmedium