AI BENCHY
AD
Track all your projects in one dashboard. Get 📊stats, 🔥heatmaps and 👀recordings in one self-hosted dashboard.
uxwizz.com
#126

Step 3.5 Flash

Stepfun リリース: 2026-02-01 テスト日時: 2026-07-16 23:25 stepfun/step-3.5-flash::medium
(medium) (none)

概要

Step 3.5 Flash は AI BENCHY で 6.0 を記録し、順位は #126 です。信頼性は 9.2、成功率は 51.5%、総コストは $0.108、平均応答時間は 174.22s です。

Step 3.5 Flash の特徴: 最も目立つのは 反AIトリック で、順位は #1 です。一方、最も弱い領域は コーディング#13 です。 推論トークンの使用量がかなり多く、遅さやコストの高さにつながっている可能性があります。

スコア

6.0

一貫性

9.0

信頼性

9.2

合計コスト(現在価格)

$0.108 ↑ +80.5%

テスト時価格: $0.060

合計出力トークン

402,554

合計入力トークン

65,707

入力価格

$0.100 / 1M

出力価格

$0.300 / 1M

正解テスト

誤答テスト数: 10

試行ごとの合格率: 51.5%

不安定なテスト

1

不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。

応答時間(平均)

174.22s

応答時間(最大): 1597.85s

応答時間(合計): 2613.32s

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#126 Step 3.5 Flash

medium
コスト
$0.008
時間
277.1s
トークン
23,695 tok

実行履歴

テスト日時 スコア 信頼性 正解テスト 合計コスト 比較する
2026-07-16 23:25 新しいテストを追加 6.0 9.2 $0.108 現在の実行
2026-06-04 14:12 新しいテストを追加 7.2 8.9 $0.070 比較する
2026-05-22 00:30 スイート変更 7.4 9.3 $0.015 比較する
2026-05-08 15:30 スイート変更 7.6 10.0 $0.011 比較する
2026-04-11 00:35 最初に記録された実行 7.9 該当なし $0.000 比較する

この実行では別のベンチマークスイートが使われました。履歴の変化を読むときはスイート変更も考慮してください。

実行比較

実行スコア一貫性信頼性正解テスト不安定なテスト合計出力トークン合計入力トークン合計コスト応答時間(平均)
2026-07-16 23:25 · 現在の実行6.09.09.211/211402,55465,707$0.108174.22s
2026-04-11 00:35 · 最初に記録された実行7.99.1該当なし11/172227,5110$0.00026.78s
差分-1.9-0.10-1+175043+65707+$0.108+147442ms

この 2 つの実行では異なるベンチマークスイートが使われているため、差分にはモデル変化とスイート変化の両方が含まれます。

価格履歴

このモデルの OpenRouter における過去の価格データ。

日付 入力価格 出力価格
2026-06-04 15:40 $0.090 / 1M $0.300 / 1M
2026-06-30 21:25 $0.100 / 1M $0.300 / 1M

チャート

最初のモデルを選択し、次に2つ目のモデルをクリックして並列比較ページを開きます。

合計出力トークン

スコア vs 合計出力トークン

クイック比較

カテゴリ内訳

カテゴリ スコア 一貫性 正解テスト
反AIトリック 10.0 10.0
コーディング 2.4 5.2
複合 6.5 10.0
データ解析と抽出 10.0 10.0
ドメイン特化 5.3 7.2
汎用知能 5.5 10.0
指示追従 8.3 10.0
パズル解決 5.3 10.0
ツール呼び出し 10.0 10.0
雑学 3.0 10.0

比較対象モデル