|
スコア
|
8.4
全ベンチマークテストの平均スコア。
…
|
7.8
全ベンチマークテストの平均スコア。
…
|
7.9
全ベンチマークテストの平均スコア。
…
|
5.5
全ベンチマークテストの平均スコア。
…
|
|
順位
|
#42 |
#68 |
#61 |
#214 |
|
信頼性
|
9.6
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
|
9.6
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
|
10.0
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
|
10.0
初回試行成功スコア: 10.0 は、成功した呼び出しの前に再試行可能な対象APIまたはレート制限の失敗がないことを示します。記録された失敗はスコアを下げます。
…
|
|
一貫性
|
9.2
一貫性スコアは実行間の安定性を示します（10 = 非常に一貫、常に誤りでも一貫）。
…
|
9.7
一貫性スコアは実行間の安定性を示します（10 = 非常に一貫、常に誤りでも一貫）。
…
|
10.0
一貫性スコアは実行間の安定性を示します（10 = 非常に一貫、常に誤りでも一貫）。
…
|
10.0
一貫性スコアは実行間の安定性を示します（10 = 非常に一貫、常に誤りでも一貫）。
…
|
|
試行回数
|
66/66 |
66/66 |
66/66 |
66/66 |
|
正解テスト
|
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
指示に従っていない: 2 回答なし: 2 不正解: 2
応答時間（平均）167.89s
応答時間（最大）640.85s
応答時間（合計）3693.54s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
|
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
不正解: 3 指示に従っていない: 2 API エラー: 1 無効なツール呼び出し: 1 回答なし: 1
応答時間（平均）33.05s
応答時間（最大）214.63s
応答時間（合計）694.04s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
|
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
不正解: 4 回答なし: 2 指示に従っていない: 1
応答時間（平均）39.11s
応答時間（最大）376.04s
応答時間（合計）860.51s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
|
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
不正解: 11 指示に従っていない: 1 無効なツール呼び出し: 1
応答時間（平均）3.12s
応答時間（最大）44.76s
応答時間（合計）68.69s
テストは、その全実行が合格した場合にのみ完全合格とみなされます。
…
|
|
試行ごとの合格率
|
77.3%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
|
66.7%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
|
68.2%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
|
40.9%
試行ごとの合格率 = 合格試行数 / 全実行での総試行数。
…
|
|
不安定なテスト
|
2
不安定なテストは、実行間で結果が混在しています（少なくとも1回合格かつ1回失敗）。
…
|
1
不安定なテストは、実行間で結果が混在しています（少なくとも1回合格かつ1回失敗）。
…
|
0
不安定なテストは、実行間で結果が混在しています（少なくとも1回合格かつ1回失敗）。
…
|
0
不安定なテストは、実行間で結果が混在しています（少なくとも1回合格かつ1回失敗）。
…
|
|
総実行回数
|
66
総実行回数
…
|
66
総実行回数
…
|
66
総実行回数
…
|
66
総実行回数
…
|
|
結果あたりのコスト
|
~1.792GPUの電気料金のみの推定です。コンピューターの他の部分とハードウェアの購入費用は含みません。 NVIDIA GeForce RTX 3090: 2.8999 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.286715. |
~0.409GPUの電気料金のみの推定です。コンピューターの他の部分とハードウェアの購入費用は含みません。 NVIDIA GeForce RTX 3090: 0.5784 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.057183. |
~0.473GPUの電気料金のみの推定です。コンピューターの他の部分とハードウェアの購入費用は含みません。 NVIDIA GeForce RTX 3090: 0.7171 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.070898. |
~0.063GPUの電気料金のみの推定です。コンピューターの他の部分とハードウェアの購入費用は含みません。 NVIDIA GeForce RTX 3090: 0.0572 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.005659. |
|
合計コスト
|
~$0.287GPUの電気料金のみの推定です。コンピューターの他の部分とハードウェアの購入費用は含みません。 NVIDIA GeForce RTX 3090: 2.8999 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.286715. |
~$0.058GPUの電気料金のみの推定です。コンピューターの他の部分とハードウェアの購入費用は含みません。 NVIDIA GeForce RTX 3090: 0.5784 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.057183. |
~$0.071GPUの電気料金のみの推定です。コンピューターの他の部分とハードウェアの購入費用は含みません。 NVIDIA GeForce RTX 3090: 0.7171 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.070898. |
~$0.006GPUの電気料金のみの推定です。コンピューターの他の部分とハードウェアの購入費用は含みません。 NVIDIA GeForce RTX 3090: 0.0572 h × 0.300 kW × €0.2896/kWh × 1.138 USD/EUR = ~$0.005659. |
|
入力価格
|
該当なし
入力価格
…
|
該当なし
入力価格
…
|
該当なし
入力価格
…
|
該当なし
入力価格
…
|
|
出力価格
|
該当なし
出力価格
…
|
該当なし
出力価格
…
|
該当なし
出力価格
…
|
該当なし
出力価格
…
|
|
合計入力トークン
|
100,179
合計入力トークン
…
|
98,266
合計入力トークン
…
|
99,705
合計入力トークン
…
|
122,463
合計入力トークン
…
|
|
出力トークン
|
904
出力トークン
…
|
1,861
出力トークン
…
|
1,545
出力トークン
…
|
11,445
出力トークン
…
|
|
推論トークン
|
655,731
推論トークン
…
|
134,301
推論トークン
…
|
167,784
推論トークン
…
|
0
推論トークン
…
|
|
応答時間（平均）
|
167.89s
応答時間（平均）
…
|
33.05s
応答時間（平均）
…
|
39.11s
応答時間（平均）
…
|
3.12s
応答時間（平均）
…
|
|
応答時間（最大）
|
640.85s
応答時間（最大）
…
|
214.63s
応答時間（最大）
…
|
376.04s
応答時間（最大）
…
|
44.76s
応答時間（最大）
…
|
|
応答時間（合計）
|
3693.54s
応答時間（合計）
…
|
694.04s
応答時間（合計）
…
|
860.51s
応答時間（合計）
…
|
68.69s
応答時間（合計）
…
|
|
パラメータ
|
27.3B |
27.3B |
27.3B |
27.3B |
|
公開状況
|
重み公開 |
重み公開 |
重み公開 |
重み公開 |