GPT-4o-mini vs Inkling Small

Modeli zilizolinganishwa

Nafasi: #304
Jumla ya tokeni za matokeo: 3,627
Muda wa majibu (wastani): 4.16s
Jumla ya gharama: $0.024

Nafasi: #307
Jumla ya tokeni za matokeo: 8,770
Muda wa majibu (wastani): 1.45s
Jumla ya gharama: $0.054

Muundo unaopendekezwa Inkling Small

Its score stays close to the best score here (4.9 vs 5.0), while responding about 2.9x faster than GPT-4o-mini.

Ulinganisho wa kina

Kipimo	GPT-4o-mini GPT-4o-mini none Toleo: 2024-07-18	Inkling Small Inkling Small none Toleo: 2026-08-01 Inapatikana bure

Kipimo	GPT-4o-mini GPT-4o-mini none Toleo: 2024-07-18	Inkling Small Inkling Small none Toleo: 2026-08-01 Inapatikana bure
Alama	5.0	4.9
Nafasi	#304	#307
Uaminifu	10.0	10.0
Uthabiti	9.9	9.6
Majaribio	69/69	69/69
Majaribio sahihi
Kiwango cha kupita kwa kila jaribio	21.7%	23.2%
Majaribio yasiyo thabiti	0	1
Jumla ya uendeshaji	69	69
Gharama kwa matokeo	0.480	1.158
Jumla ya gharama	$0.024	$0.054
Bei ya ingizo	$0.150 / 1M	$0.450 / 1M
Bei ya toleo	$0.600 / 1M	$1.200 / 1M
Bei ya kusoma akiba	$0.075 / 1M	$0.100 / 1M
Bei ya kuandika akiba	Haipo	Haipo
Jumla ya tokeni za ingizo	145,180	94,733
Tokeni za matokeo	3,627	8,770
Tokeni za hoja	0	0
Muda wa majibu (wastani)	4.16s	1.45s
Muda wa majibu (upeo)	39.99s	12.35s
Muda wa majibu (jumla)	70.70s	33.24s
Vigezo	~8B	276B jumla (12B vinavyotumika)
Upatikanaji	Imefungwa	Imefungwa

Bei za akiba zinahusu tokeni za ingizo. Kusoma hutumia tena maelekezo yaliyohifadhiwa; kuandika huyahifadhi na kunaweza kuongeza gharama. Tokeni za matokeo hutumia bei ya matokeo.

Onyesho la kizazi cha modeli

Hamster playing table tennis

Prompt: Create a detailed SVG illustration of a hamster playing table tennis.

#304 GPT-4o-mini

none

Gharama: $0.001
Muda: 6.6s
Tokeni: 742 tok

#307 Thinking Machines: Inkling Small

none

Gharama: $0.008
Muda: 42.1s
Tokeni: 6,319 tok

Modeli bora kwa alama

Alama dhidi ya gharama ya jumla

Muda wa majibu (wastani)

Alama vs Muda wa majibu (wastani)

Jumla ya tokeni za matokeo

Alama vs Jumla ya tokeni za matokeo

Mgawanyo wa kategoria

Kategoria:

Kazi za mawakala	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
GPT-4o-mini	5.0	10.0	0.0%	0		39.99s	92,035	714	0
Inkling Small	3.0	10.0	0.0%	0		31ms	0	0	0

Mbinu za kupinga AI	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
GPT-4o-mini	4.8	10.0	25.0%	0		1.34s	618	186	0
Inkling Small	3.1	8.0	8.3%	1		526ms	678	250	0

Uandishi wa msimbo	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
GPT-4o-mini	3.2	9.6	0.0%	0		1.63s	7,314	367	0
Inkling Small	3.6	10.0	0.0%	0		759ms	7,356	454	0

Mchanganyiko	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
GPT-4o-mini	3.0	10.0	0.0%	0		6.32s	29,916	1,497	0
Inkling Small	6.5	10.0	50.0%	0		9.33s	68,294	6,854	0

Uchanganuzi na uchimbaji wa data	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
GPT-4o-mini	10.0	10.0	100.0%	0		1.27s	7,161	183	0
Inkling Small	10.0	10.0	100.0%	0		782ms	7,056	279	0

Mahususi kwa domeni	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
GPT-4o-mini	3.0	10.0	0.0%	0		743ms	741	17	0
Inkling Small	5.3	10.0	33.3%	0		442ms	786	42	0

Akili ya jumla	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
GPT-4o-mini	4.0	10.0	0.0%	0		909ms	480	66	0
Inkling Small	5.0	10.0	0.0%	0		964ms	495	178	0

Ufuataji wa maagizo	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
GPT-4o-mini	6.3	10.0	50.0%	0		1.11s	666	69	0
Inkling Small	6.3	10.0	50.0%	0		767ms	696	72	0

Utatuzi wa mafumbo	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
GPT-4o-mini	3.5	10.0	0.0%	0		1.21s	651	308	0
Inkling Small	3.2	9.7	0.0%	0		665ms	696	332	0

Mwito wa zana	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
GPT-4o-mini	10.0	10.0	100.0%	0		2.51s	5,400	205	0
Inkling Small	3.0	10.0	0.0%	0		2.31s	8,463	291	0

Maarifa ya jumla	Alama	Uthabiti	Kiwango cha kupita kwa kila jaribio	Majaribio yasiyo thabiti	Majaribio sahihi	Muda wa majibu (wastani)	Tokeni za ingizo	Tokeni za matokeo	Tokeni za hoja
GPT-4o-mini	3.0	10.0	0.0%	0		794ms	198	15	0
Inkling Small	3.0	10.0	0.0%	0		481ms	213	18	0

Ulinganisho wa haraka

Badilisha jozi ya ulinganisho

KAT Coder AIR V2.5lowvsGPT-4o-mininone MiniMax M2.7mediumvsGPT-4o-mininone Laguna S 2.1highInapatikana burevsInkling SmallnoneInapatikana bure KAT Coder AIR V2.5lowvsInkling SmallnoneInapatikana bure Mercury 2.5 PreviewlowvsGPT-4o-mininone MiniMax M2.7mediumvsInkling SmallnoneInapatikana bure GPT-4o-mininonevsLaguna S 2.1highInapatikana bure GPT-4o-mininonevsLaguna S 2.1mediumInapatikana bure Mercury 2.5 PreviewlowvsInkling SmallnoneInapatikana bure Laguna S 2.1mediumInapatikana burevsInkling SmallnoneInapatikana bure KAT Coder AIR V2.5mediumvsGPT-4o-mininone Mercury 2.5lowvsGPT-4o-mininone