ナビゲーション
AI BENCHY
比較する チャート
❤️ Made by XCS
Your ad here

AI BENCHY Compare

StepFun: Step 3.5 Flash vs xAI: Grok 4.1 Fast

モデル名:

ベンチマークは AI BENCHY テストスイートから次の日時に生成 : 2026-02-27 15:16

概要

指標 StepFun: Step 3.5 Flash medium リリース: リリース日不明 無料で利用可能 xAI: Grok 4.1 Fast none リリース: リリース日不明
順位 #11 #38
スコア 7.00 3.00
一貫性 8.32 8.69
結果あたりのコスト 0.000 0.176
合計コスト $0.000 $0.006
正解テスト
誤答テスト数 5 11
試行ごとの合格率 73.8% 28.6%
不安定なテスト 3 2
出力トークン 60,502 931
推論トークン 117,044 0

カテゴリ内訳

反AIトリック スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 出力トークン 推論トークン
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 13,924 17,208
xAI: Grok 4.1 Fast 1.33 10.00 0.0% 0 229 0
データ解析と抽出 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 出力トークン 推論トークン
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 535 11,548
xAI: Grok 4.1 Fast 10.00 10.00 100.0% 0 180 0
ドメイン特化 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 出力トークン 推論トークン
StepFun: Step 3.5 Flash 4.00 7.21 44.4% 1 40,942 74,237
xAI: Grok 4.1 Fast 4.00 7.21 55.6% 1 15 0
指示追従 スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 出力トークン 推論トークン
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 2,121 3,274
xAI: Grok 4.1 Fast 1.00 10.00 0.0% 0 66 0
Puzzle Solving スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 出力トークン 推論トークン
StepFun: Step 3.5 Flash 2.00 4.96 33.3% 2 2,705 6,975
xAI: Grok 4.1 Fast 1.00 9.48 0.0% 0 233 0
ツール呼び出し スコア 一貫性 試行ごとの合格率 不安定なテスト 正解テスト 出力トークン 推論トークン
StepFun: Step 3.5 Flash 10.00 10.00 100.0% 0 275 3,802
xAI: Grok 4.1 Fast 1.00 1.62 33.3% 1 208 0

比較ペアを切り替え