AI BENCHY Compare

North Mini Code vs OpenAI: GPT-5.4

概要

North Mini Code vs GPT-5.4 の benchmark 比較: North Mini Code が平均スコアでリードし、5.8 vs 5.8 です。 North Mini Code の benchmark コストが低く、$0.000 vs $0.122 です。 GPT-5.4 の方が高速で、1.42s vs 106.18s です、成功率は 50.8% vs 36.5% です。

おすすめモデル: GPT-5.4 - スコアはここでの最高値に近く（5.8 vs 5.8）、North Mini Code より約 74.6 倍速く応答します。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-06-18

指標	North Mini Code North Mini Code medium リリース: 2026-06-18 無料で利用可能	GPT-5.4 GPT-5.4 none リリース: 2026-03-05

指標	North Mini Code North Mini Code medium リリース: 2026-06-18 無料で利用可能	GPT-5.4 GPT-5.4 none リリース: 2026-03-05
スコア	5.8	5.8
順位	#107	#112
信頼性	8.5	10.0
一貫性	8.5	9.2
正解テスト
試行ごとの合格率	50.8%	36.5%
不安定なテスト	4	2
総実行回数	55	63
結果あたりのコスト	0.000	1.740
合計コスト	$0.000	$0.122
入力価格	$0.000 / 1M	$2.500 / 1M
出力価格	$0.000 / 1M	$15.000 / 1M
合計入力トークン	32,891	34,212
出力トークン	424,772	2,417
推論トークン	1,021,489	0
応答時間（平均）	106.18s	1.42s
応答時間（最大）	357.05s	2.95s
応答時間（合計）	2229.70s	29.87s

Generation showcase

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#107 North Mini Code

medium

Cost: $0.000
Time: 51.8s
Tokens: 12,460 tok

#112 GPT-5.4

none

Cost: $0.026
Time: 18.1s
Tokens: 1,792 tok

スコア上位モデル

スコア vs 総コスト

応答時間（平均）

スコア vs 応答時間（平均）

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
North Mini Code	8.4	10.0	75.0%	0		64.79s	324	64,441	68,535
GPT-5.4	3.2	8.0	8.3%	1		1.21s	606	406	0

コーディング	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
North Mini Code	4.5	4.9	33.3%	2		320.43s	7,119	219,891	561,569
GPT-5.4	5.5	10.0	33.3%	0		1.62s	7,305	516	0

複合	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
North Mini Code	2.8	1.6	33.3%	1		323.07s	14,760	0	151,500
GPT-5.4	3.0	10.0	0.0%	0		2.89s	11,019	291	0

データ解析と抽出	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
North Mini Code	10.0	10.0	100.0%	0		24.06s	6,819	240	2,659
GPT-5.4	10.0	10.0	100.0%	0		1.04s	7,140	222	0

ドメイン特化	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
North Mini Code	5.3	7.2	44.4%	1		71.37s	621	8,483	104,079
GPT-5.4	5.3	7.2	44.4%	1		1.07s	723	50	0

汎用知能	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
North Mini Code	5.1	10.0	0.0%	0		25.08s	444	1,546	1,635
GPT-5.4	4.4	9.9	0.0%	0		1.78s	477	184	0

指示追従	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
North Mini Code	9.8	10.0	100.0%	0		15.43s	379	909	1,339
GPT-5.4	6.5	10.0	50.0%	0		1.07s	660	81	0

パズル解決	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
North Mini Code	3.3	10.0	0.0%	0		19.70s	543	2,215	2,485
GPT-5.4	5.6	9.8	33.3%	0		1.44s	642	381	0

ツール呼び出し	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
North Mini Code	10.0	10.0	100.0%	0		3.93s	1,776	41	563
GPT-5.4	10.0	10.0	100.0%	0		2.75s	5,445	246	0

雑学	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
North Mini Code	3.0	10.0	0.0%	0		305.02s	106	127,006	127,125
GPT-5.4	3.0	10.0	0.0%	0		990ms	195	40	0

クイック比較

比較ペアを切り替え