AI BENCHY Compare
概要
平均スコアは 6.8 vs 6.8 でほぼ同等です。 Ring-2.6-1T (medium) の benchmark コストが低く、$0.033 vs $0.220 です。 KAT-Coder-Pro V2.5 の方が高速で、10.81s vs 61.29s です、成功率は 60.3% vs 71.4% です。
ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-07-14
| 指標 | Ring-2.6-1T Ring-2.6-1T medium | KAT-Coder-Pro V2.5 KAT-Coder-Pro V2.5 none |
|---|---|---|
| スコア | 6.8 | 6.8 |
| 順位 | #90 | #89 |
| 信頼性 | 10.0 | 10.0 |
| 一貫性 | 8.8 | 7.3 |
| 正解テスト | ||
| 試行ごとの合格率 | 60.3% | 71.4% |
| 不安定なテスト | 3 | 7 |
| 総実行回数 | 63 | 63 |
| 結果あたりのコスト | 0.000 | 1.992 |
| 合計コスト | $0.033 | $0.220 |
| 入力価格 | $0.075 / 1M | $0.740 / 1M |
| 出力価格 | $0.625 / 1M | $2.960 / 1M |
| 合計入力トークン | 35,892 | 42,749 |
| 出力トークン | 21,752 | 63,338 |
| 推論トークン | 42,754 | 0 |
| 応答時間（平均） | 61.29s | 10.81s |
| 応答時間（最大） | 304.19s | 53.57s |
| 応答時間（合計） | 1164.50s | 227.02s |
生成ショーケース
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
| コーディング | スコア | 一貫性 | 試行ごとの合格率 | 不安定なテスト | 正解テスト | 応答時間（平均） | 入力トークン | 出力トークン | 推論トークン |
|---|---|---|---|---|---|---|---|---|---|
| Ring-2.6-1T | 5.3 | 10.0 | 33.3% | 0 | 59.65s | 834 | 1,369 | 3,985 | |
| KAT-Coder-Pro V2.5 | 6.1 | 4.7 | 66.7% | 2 | 22.52s | 7,893 | 22,440 | 0 |
比較ペアを切り替え