#58 Step 3.5 Flash
medium- コスト
- $0.008
- 時間
- 277.1s
- トークン
- 23,695 tok
概要
Step 3.5 Flash は AI BENCHY で 7.4 を記録し、順位は #58 です。信頼性は 9.3、成功率は 65.8%、総コストは $0.015、平均応答時間は 43.29s です。
Step 3.5 Flash の特徴: 最も目立つのは 反AIトリック で、順位は #1 です。一方、最も弱い領域は コーディング で #18 です。 このスコア帯としては benchmark 総コストがかなり低めです。
入力価格
$0.090 / 1M
出力価格
$0.300 / 1M
不安定なテスト
3
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
実行履歴
| テスト日時 | スコア | 信頼性 | 正解テスト | 合計コスト | 比較する |
|---|---|---|---|---|---|
| 2026-07-16 23:25 新しいテストを追加 | 6.0 | 9.2 | $0.108 ↑ | 比較する | |
| 2026-06-04 14:12 新しいテストを追加 | 7.2 | 8.9 | $0.070 ↑ | 比較する | |
| 2026-05-22 00:30 スイート変更 | 7.4 | 9.3 | $0.015 | 現在の実行 | |
| 2026-05-08 15:30 スイート変更 | 7.6 | 10.0 | $0.011 | 比較する | |
| 2026-04-11 00:35 最初に記録された実行 | 7.9 | 該当なし | $0.000 | 比較する |
この実行では別のベンチマークスイートが使われました。履歴の変化を読むときはスイート変更も考慮してください。
実行比較
| 実行 | スコア | 一貫性 | 信頼性 | 正解テスト | 不安定なテスト | 合計出力トークン | 合計入力トークン | 合計コスト | 応答時間(平均) |
|---|---|---|---|---|---|---|---|---|---|
| 2026-05-22 00:30 · スイート変更 | 7.4 | 8.7 | 9.3 | 11/19 | 3 | 263,806 | 0 | $0.015 | 43.29s |
| 2026-04-11 00:35 · 最初に記録された実行 | 7.9 | 9.1 | 該当なし | 11/17 | 2 | 227,511 | 0 | $0.000 | 26.78s |
| 差分 | -0.5 | -0.4 | 0 | +1 | +36295 | 0 | +$0.015 | +16508ms |
この 2 つの実行では異なるベンチマークスイートが使われているため、差分にはモデル変化とスイート変化の両方が含まれます。
最初のモデルを選択し、次に2つ目のモデルをクリックして並列比較ページを開きます。