#334 North Mini Code
medium- コスト
- $0.000
- 時間
- 51.8s
- トークン
- 12,460 tok
概要
North Mini Code は AI BENCHY で 5.4 を記録し、順位は #334 です。信頼性は 8.9、成功率は 42.0%、総コストは $0.000、平均応答時間は 140.39s です。
North Mini Code の特徴: 最も目立つのは 反AIトリック で、順位は #2 です。一方、最も弱い領域は ドメイン特化 で #14 です。 このスコア帯としては benchmark 総コストがかなり低めです。 推論トークンの使用量がかなり多く、遅さやコストの高さにつながっている可能性があります。
調査日:2026-08-12
入力価格
$0.000 / 1M
出力価格
$0.000 / 1M
キャッシュ読み取り料金
該当なし
キャッシュ書き込み料金
該当なし
キャッシュ料金は入力トークンに適用されます。読み取りは保存済みのプロンプトを再利用し、書き込みは保存するため追加料金がかかる場合があります。出力トークンには出力料金が適用されます。
不安定なテスト
4
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
Prompt: Create a detailed SVG illustration of a hamster playing table tennis.
実行履歴
| テスト日時 | スコア | 信頼性 | 正解テスト | 合計コスト | 比較する |
|---|---|---|---|---|---|
| 2026-10-01 03:03 再テスト | 5.4 | 8.9 | $0.000 | 現在の実行 | |
| 2026-07-16 23:46 新しいテストを追加 | 5.9 | 8.6 | $0.000 | 比較する | |
| 2026-06-18 09:44 初回実行 | 5.8 | 8.5 | $0.000 | 比較する |
この実行では別のベンチマークスイートが使われました。履歴の変化を読むときはスイート変更も考慮してください。
実行比較
| 実行 | ベンチマーク網羅率 | スコア | 一貫性 | 信頼性 | 正解テスト | 不安定なテスト | 合計出力トークン | 合計入力トークン | 合計コスト | 応答時間(平均) |
|---|---|---|---|---|---|---|---|---|---|---|
| 2026-10-01 03:03 · 現在の実行 | 61/69 回 | 5.4 | 8.6 | 8.9 | 8/23 | 4 | 1,359,341 | 166,347 | $0.000 | 140.39s |
| 2026-07-16 23:46 · 新しいテストを追加 | 58/66 回 | 5.9 | 8.5 | 8.6 | 9/22 | 4 | 1,766,801 | 81,813 | $0.000 | 137.11s |
| 差分 | — | -0.5 | +0.1 | +0.3 | -1 | 0 | -407460 | +84534 | $0.000 | +3285ms |
ベンチマーク網羅率が異なります: 61/69 回 (目標: テストごとに 3 回) と 58/66 回 (目標: テストごとに 3 回)。合計値と反復回数に左右される指標は直接比較できません。
この 2 つの実行では異なるベンチマークスイートが使われているため、差分にはモデル変化とスイート変化の両方が含まれます。
最初のモデルを選択し、次に2つ目のモデルをクリックして並列比較ページを開きます。