#74 Step 3.7 Flash
high- コスト
- $0.007
- 時間
- 63.6s
- トークン
- 6,030 tok
概要
Step 3.7 Flash は AI BENCHY で 7.1 を記録し、順位は #74 です。信頼性は 9.9、成功率は 65.8%、総コストは $0.960、平均応答時間は 49.43s です。
調査日:2026-08-12
入力価格
$0.200 / 1M
出力価格
$1.150 / 1M
不安定なテスト
4
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
実行履歴
| テスト日時 | スコア | 信頼性 | 正解テスト | 合計コスト | 比較する |
|---|---|---|---|---|---|
| 2026-08-14 02:45 再テスト | 6.8 | 10.0 | $1.229 | 比較する | |
| 2026-07-16 22:46 新しいテストを追加 | 6.9 | 10.0 | $1.207 | 比較する | |
| 2026-06-04 14:10 新しいテストを追加 | 7.0 | 10.0 | $1.148 | 比較する | |
| 2026-05-29 11:53 初回実行 | 7.1 | 9.9 | $0.960 | 現在の実行 |
実行比較
| 実行 | ベンチマーク網羅率 | スコア | 一貫性 | 信頼性 | 正解テスト | 不安定なテスト | 合計出力トークン | 合計入力トークン | 合計コスト | 応答時間(平均) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-05-29 11:53 · 初回実行 | 60/60 回 | 7.1 | 8.2 | 9.9 | 11/20 | 4 | 828,084 | 0 | $0.960 | 49.43s |
| 2026-07-16 22:46 · 新しいテストを追加 | 66/66 回 | 6.9 | 8.0 | 10.0 | 11/22 | 5 | 1,032,395 | 98,691 | $1.207 | 64.68s |
| 差分 | — | +0.3 | +0.2 | -0.1 | 0 | -1 | -204311 | -98691 | -$0.248 | -15254ms |
ベンチマーク網羅率が異なります: 60/60 回 (目標: テストごとに 3 回) と 66/66 回 (目標: テストごとに 3 回)。合計値と反復回数に左右される指標は直接比較できません。
この 2 つの実行では異なるベンチマークスイートが使われているため、差分にはモデル変化とスイート変化の両方が含まれます。
最初のモデルを選択し、次に2つ目のモデルをクリックして並列比較ページを開きます。