スコア
8.3
全ベンチマークテストの平均スコア。
…
6.8
全ベンチマークテストの平均スコア。
…
9.5
全ベンチマークテストの平均スコア。
…
8.3
全ベンチマークテストの平均スコア。
…
順位
#93
#196
#20
#90
信頼性
9.3
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
10.0
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
10.0
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
10.0
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
一貫性
9.3
一貫性スコアは実行間の安定性を示します(10 = 非常に一貫、常に誤りでも一貫)。
…
8.4
一貫性スコアは実行間の安定性を示します(10 = 非常に一貫、常に誤りでも一貫)。
…
8.9
一貫性スコアは実行間の安定性を示します(10 = 非常に一貫、常に誤りでも一貫)。
…
9.4
一貫性スコアは実行間の安定性を示します(10 = 非常に一貫、常に誤りでも一貫)。
…
試行回数
69/69
69/69
69/69
69/69
正解テスト
17/23
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
API エラー: 2 回答なし: 2 余分な書式: 1 タイムアウト: 1
応答時間(平均) 139.41s
応答時間(最大) 766.58s
応答時間(合計) 2788.26s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
12/23
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
不正解: 4 タイムアウト: 3 指示に従っていない: 2 無効なツール呼び出し: 1 回答なし: 1
応答時間(平均) 121.25s
応答時間(最大) 876.20s
応答時間(合計) 2667.55s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
19/23
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
不正解: 4
応答時間(平均) 14.57s
応答時間(最大) 79.40s
応答時間(合計) 335.16s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
15/23
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
不正解: 7 無効なツール呼び出し: 1
応答時間(平均) 13.62s
応答時間(最大) 91.49s
応答時間(合計) 313.21s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
試行ごとの合格率
78.3%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
60.9%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
91.3%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
69.6%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
不安定なテスト
2
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
…
4
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
…
3
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
…
2
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
…
総実行回数
69
総実行回数
…
69
総実行回数
…
69
総実行回数
…
69
総実行回数
…
結果あたりのコスト
23.601
12.282
8.944
8.674
合計コスト
$3.409
$1.594
$1.700
$0.698
入力価格
$0.830 / 1M
入力価格
…
$0.950 / 1M
入力価格
…
$2.000 / 1M
入力価格
…
$2.000 / 1M
入力価格
…
出力価格
$14.000 / 1M
出力価格
…
$4.000 / 1M
出力価格
…
$10.000 / 1M
出力価格
…
$12.000 / 1M
出力価格
…
キャッシュ読み取り料金
$0.270 / 1M
キャッシュ読み取り料金
…
$0.160 / 1M
キャッシュ読み取り料金
…
$0.200 / 1M
キャッシュ読み取り料金
…
$0.200 / 1M
キャッシュ読み取り料金
…
キャッシュ書き込み料金
該当なし
キャッシュ書き込み料金
…
該当なし
キャッシュ書き込み料金
…
$2.500 / 1M
キャッシュ書き込み料金
…
$2.500 / 1M
キャッシュ書き込み料金
…
合計入力トークン
170,700
合計入力トークン
…
226,880
合計入力トークン
…
191,341
合計入力トークン
…
197,239
合計入力トークン
…
出力トークン
7,719
出力トークン
…
65,346
出力トークン
…
5,665
出力トークン
…
6,083
出力トークン
…
推論トークン
225,608
推論トークン
…
331,325
推論トークン
…
32,340
推論トークン
…
53,982
推論トークン
…
応答時間(平均)
139.41s
応答時間(平均)
…
121.25s
応答時間(平均)
…
14.57s
応答時間(平均)
…
13.62s
応答時間(平均)
…
応答時間(最大)
766.58s
応答時間(最大)
…
876.20s
応答時間(最大)
…
79.40s
応答時間(最大)
…
91.49s
応答時間(最大)
…
応答時間(合計)
2788.26s
応答時間(合計)
…
2667.55s
応答時間(合計)
…
335.16s
応答時間(合計)
…
313.21s
応答時間(合計)
…
パラメータ
2.8T 総数 (104B アクティブ)
1T 総数 (32B アクティブ)
~2T 総数 (~150B アクティブ)
~1T 総数 (~60B アクティブ)
公開状況
重み公開
重み公開
クローズド
クローズド