|
スコア
|
8.7
全ベンチマークテストの平均スコア。
…
|
8.0
全ベンチマークテストの平均スコア。
…
|
8.4
全ベンチマークテストの平均スコア。
…
|
7.3
全ベンチマークテストの平均スコア。
…
|
|
順位
|
#29 |
#55 |
#43 |
#100 |
|
信頼性
|
10.0
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
|
10.0
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
|
9.6
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
|
10.0
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
|
|
一貫性
|
8.9
一貫性スコアは実行間の安定性を示します(10 = 非常に一貫、常に誤りでも一貫)。
…
|
8.0
一貫性スコアは実行間の安定性を示します(10 = 非常に一貫、常に誤りでも一貫)。
…
|
9.2
一貫性スコアは実行間の安定性を示します(10 = 非常に一貫、常に誤りでも一貫)。
…
|
7.5
一貫性スコアは実行間の安定性を示します(10 = 非常に一貫、常に誤りでも一貫)。
…
|
|
試行回数
|
66/66 |
66/66 |
66/66 |
66/66 |
|
正解テスト
|
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
不正解: 2 余分な書式: 1 指示に従っていない: 1 無効なツール呼び出し: 1 回答なし: 1
応答時間(平均)52.10s
応答時間(最大)333.47s
応答時間(合計)1146.24s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
|
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
不正解: 4 指示に従っていない: 2 API エラー: 1 回答なし: 1
応答時間(平均)114.94s
応答時間(最大)600.61s
応答時間(合計)2528.65s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
|
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
指示に従っていない: 2 回答なし: 2 不正解: 2
応答時間(平均)167.89s
応答時間(最大)640.85s
応答時間(合計)3693.54s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
|
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
不正解: 6 余分な書式: 2 指示に従っていない: 1
応答時間(平均)27.82s
応答時間(最大)159.91s
応答時間(合計)612.06s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
|
|
試行ごとの合格率
|
81.8%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
|
75.8%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
|
77.3%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
|
74.2%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
|
|
不安定なテスト
|
3
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
…
|
5
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
…
|
2
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
…
|
7
不安定なテストは、実行間で結果が混在しています(少なくとも1回合格かつ1回失敗)。
…
|
|
総実行回数
|
66
総実行回数
…
|
66
総実行回数
…
|
66
総実行回数
…
|
66
総実行回数
…
|
|
結果あたりのコスト
|
0.365 |
0.956 |
~1.792GPUの電気料金のみの推定です。コンピューターの他の部分とハードウェアの購入費用は含みません。 NVIDIA GeForce RTX 3090: 2.8999 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.286715. |
3.099 |
|
合計コスト
|
$0.059 |
$0.058 |
~$0.287GPUの電気料金のみの推定です。コンピューターの他の部分とハードウェアの購入費用は含みません。 NVIDIA GeForce RTX 3090: 2.8999 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.286715. |
$0.403 |
|
入力価格
|
$0.075 / 1M
入力価格
…
|
$0.060 / 1M
入力価格
…
|
該当なし
入力価格
…
|
$1.400 / 1M
入力価格
…
|
|
出力価格
|
$0.250 / 1M
出力価格
…
|
$0.120 / 1M
出力価格
…
|
該当なし
出力価格
…
|
$4.400 / 1M
出力価格
…
|
|
合計入力トークン
|
96,873
合計入力トークン
…
|
96,702
合計入力トークン
…
|
100,179
合計入力トークン
…
|
87,601
合計入力トークン
…
|
|
出力トークン
|
7,637
出力トークン
…
|
16,966
出力トークン
…
|
904
出力トークン
…
|
6,006
出力トークン
…
|
|
推論トークン
|
196,703
推論トークン
…
|
496,341
推論トークン
…
|
655,731
推論トークン
…
|
57,661
推論トークン
…
|
|
応答時間(平均)
|
52.10s
応答時間(平均)
…
|
114.94s
応答時間(平均)
…
|
167.89s
応答時間(平均)
…
|
27.82s
応答時間(平均)
…
|
|
応答時間(最大)
|
333.47s
応答時間(最大)
…
|
600.61s
応答時間(最大)
…
|
640.85s
応答時間(最大)
…
|
159.91s
応答時間(最大)
…
|
|
応答時間(合計)
|
1146.24s
応答時間(合計)
…
|
2528.65s
応答時間(合計)
…
|
3693.54s
応答時間(合計)
…
|
612.06s
応答時間(合計)
…
|
|
パラメータ
|
320B 総数 (18B アクティブ) |
284B 総数 (13B アクティブ) |
27.3B |
744B 総数 (40B アクティブ) |
|
公開状況
|
オープンソース |
クローズド |
重み公開 |
クローズド |