比較するチャート

言語:

❤️ Made by XCS

AI BENCHY Compare

Qwen: Qwen3.5-27B vs StepFun: Step 3.5 Flash

モデル名:

ベンチマークは AI BENCHY テストスイートから次の日時に生成 : 2026-02-27 15:16

概要

指標	Qwen: Qwen3.5-27B medium リリース: リリース日不明	StepFun: Step 3.5 Flash medium リリース: リリース日不明無料で利用可能
順位	#5	#11
スコア	8.55	7.00
一貫性	9.55	8.32
結果あたりのコスト	2.950	0.000
合計コスト	$0.325	$0.000
正解テスト
誤答テスト数	3	5
試行ごとの合格率	83.3%	73.8%
不安定なテスト	1	3
出力トークン	1,091	60,502
推論トークン	131,807	117,044

カテゴリ内訳

反AIトリック	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	出力トークン	推論トークン
Qwen: Qwen3.5-27B	10.00	10.00	100.0%	0		102	8,956
StepFun: Step 3.5 Flash	10.00	10.00	100.0%	0		13,924	17,208

データ解析と抽出	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	出力トークン	推論トークン
Qwen: Qwen3.5-27B	9.88	10.00	100.0%	0		270	16,150
StepFun: Step 3.5 Flash	10.00	10.00	100.0%	0		535	11,548

ドメイン特化	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	出力トークン	推論トークン
Qwen: Qwen3.5-27B	4.00	10.00	33.3%	0		43	52,368
StepFun: Step 3.5 Flash	4.00	7.21	44.4%	1		40,942	74,237

指示追従	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	出力トークン	推論トークン
Qwen: Qwen3.5-27B	9.00	6.88	83.3%	1		97	11,638
StepFun: Step 3.5 Flash	10.00	10.00	100.0%	0		2,121	3,274

Puzzle Solving	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	出力トークン	推論トークン
Qwen: Qwen3.5-27B	10.00	10.00	100.0%	0		231	41,372
StepFun: Step 3.5 Flash	2.00	4.96	33.3%	2		2,705	6,975

ツール呼び出し	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	出力トークン	推論トークン
Qwen: Qwen3.5-27B	10.00	10.00	100.0%	0		348	1,323
StepFun: Step 3.5 Flash	10.00	10.00	100.0%	0		275	3,802

比較ペアを切り替え

Qwen: Qwen3.5-27B と比較...

StepFun: Step 3.5 Flash と比較...