AI BENCHY Compare

Trinity Large Preview vs Mistral: Mistral Small 4

概要

Trinity Large Preview vs Mistral Small 4 (medium) の benchmark 比較: Mistral Small 4 (medium) が平均スコアでリードし、5.1 vs 5.0 です。 Trinity Large Preview の benchmark コストが低く、$0.008 vs $0.068 です。 Trinity Large Preview の方が高速で、2.98s vs 9.40s です、成功率は 22.2% vs 44.4% です。

おすすめモデル: Trinity Large Preview - スコアはここでの最高値に近く（5.0 vs 5.1）、Mistral Small 4 (medium) より約 8.7 倍低コストです。

ベンチマークは AI BENCHY テストスイートから次の日時に生成: 2026-07-10

指標	Trinity Large Preview Trinity Large Preview none リリース: 2026-01-27	Mistral Small 4 Mistral Small 4 medium リリース: 2026-03-16

指標	Trinity Large Preview Trinity Large Preview none リリース: 2026-01-27	Mistral Small 4 Mistral Small 4 medium リリース: 2026-03-16
スコア	5.0	5.1
順位	#157	#153
信頼性	10.0	10.0
一貫性	9.3	6.9
正解テスト
試行ごとの合格率	22.2%	44.4%
不安定なテスト	2	8
総実行回数	63	63
結果あたりのコスト	0.017	1.344
合計コスト	$0.008	$0.068
入力価格	$0.243 / 1M	$0.150 / 1M
出力価格	$0.243 / 1M	$0.600 / 1M
合計入力トークン	29,828	42,576
出力トークン	2,169	24,184
推論トークン	0	84,678
応答時間（平均）	2.98s	9.40s
応答時間（最大）	14.34s	59.15s
応答時間（合計）	56.57s	197.39s

生成ショーケース

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#157 Trinity Large Preview

none

No endpoints found for arcee-ai/trinity-large-preview:free.

コスト: $0.000
時間: 0.0s
トークン: 0 tok

#153 Mistral Small 4

medium

コスト: $0.006
時間: 47.9s
トークン: 9,857 tok

スコア上位モデル

スコア vs 総コスト

応答時間（平均）

スコア vs 応答時間（平均）

合計出力トークン

スコア vs 合計出力トークン

カテゴリ内訳

反AIトリック	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Trinity Large Preview	3.1	10.0	0.0%	0		2.07s	651	550	0
Mistral Small 4	5.6	3.8	66.7%	3		2.67s	708	4,055	4,778

コーディング	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Trinity Large Preview	3.7	7.7	11.1%	1		14.34s	738	397	0
Mistral Small 4	4.4	5.1	33.3%	2		39.98s	7,636	11,635	54,715

複合	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Trinity Large Preview	3.0	10.0	0.0%	0		8.91s	12,053	294	0
Mistral Small 4	3.0	10.0	0.0%	0		25.25s	18,706	2,612	10,700

データ解析と抽出	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Trinity Large Preview	10.0	10.0	100.0%	0		3.26s	6,900	186	0
Mistral Small 4	7.3	5.9	83.3%	1		1.23s	6,171	335	723

ドメイン特化	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Trinity Large Preview	5.3	10.0	33.3%	0		877ms	738	25	0
Mistral Small 4	5.3	7.2	44.4%	1		6.11s	742	2,621	6,904

汎用知能	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Trinity Large Preview	4.5	10.0	0.0%	0		873ms	498	104	0
Mistral Small 4	4.8	10.0	0.0%	0		2.05s	519	821	828

指示追従	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Trinity Large Preview	3.5	10.0	0.0%	0		822ms	678	63	0
Mistral Small 4	7.3	5.8	83.3%	1		1.38s	729	540	1,031

パズル解決	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Trinity Large Preview	3.6	7.7	11.1%	1		1.97s	669	265	0
Mistral Small 4	3.4	9.7	0.0%	0		2.17s	735	1,226	2,632

ツール呼び出し	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Trinity Large Preview	10.0	10.0	100.0%	0		6.67s	6,699	267	0
Mistral Small 4	10.0	10.0	100.0%	0		3.50s	6,420	321	810

雑学	スコア	一貫性	試行ごとの合格率	不安定なテスト	正解テスト	応答時間（平均）	入力トークン	出力トークン	推論トークン
Trinity Large Preview	3.0	10.0	0.0%	0		777ms	204	18	0
Mistral Small 4	3.0	10.0	0.0%	0		5.92s	210	18	1,557

クイック比較

比較ペアを切り替え