MedicalBenchmark
Meta: Llama 3.1 8B Instruct provider

Llama 3.1 8B Instruct

290

#290 de 319 modelsMIR 2025

Puntuació neta

53.00 pts

Certesa

39.5%

Correctes / Incorrectes

79 / 78

Cost total

$0.02

Rendiment General

(vs. mitjana)
Certesa

39.5%

avg: 77.9%

Puntuació neta

53.00 pts

avg: 143.96 pts

Encerts

79

avg: 156

Errors

78

avg: 35

Cost total

$0.02

avg: $3.36

Temps mitjà de resposta

20.8s

avg: 19.0s

Tokens sortints

234K

avg: 430K

Tokens de raonament

0

avg: 306K

Confiança mitjana

77.5%

avg: 95.2%

Desglossament per Assignatura

Al·lergologia
Encerts
1
Errors
3
No contestades
0
Certesa
25.0%
Mitjana
87.9%
Anestesiologia i Reanimació
Encerts
1
Errors
5
No contestades
0
Certesa
16.7%
Mitjana
82.3%
Cardiologia
Encerts
8
Errors
8
No contestades
6
Certesa
36.4%
Mitjana
78.6%
Cures Pal·liatives
Encerts
2
Errors
2
No contestades
0
Certesa
50.0%
Mitjana
78.6%
Dermatologia
Encerts
9
Errors
2
No contestades
1
Certesa
75.0%
Mitjana
69.4%
Endocrinologia i Nutrició
Encerts
6
Errors
8
No contestades
2
Certesa
37.5%
Mitjana
83.5%
Epidemiologia
Encerts
2
Errors
5
No contestades
0
Certesa
28.6%
Mitjana
69.1%
Estadística
Encerts
1
Errors
2
No contestades
0
Certesa
33.3%
Mitjana
76.6%
Farmacologia
Encerts
8
Errors
6
No contestades
3
Certesa
47.1%
Mitjana
74.1%
Gastroenterologia
Encerts
7
Errors
9
No contestades
5
Certesa
33.3%
Mitjana
74.1%
Genètica
Encerts
0
Errors
3
No contestades
3
Certesa
0.0%
Mitjana
69.5%
Geriatria
Encerts
7
Errors
3
No contestades
1
Certesa
63.6%
Mitjana
77.5%
Ginecologia i Obstetrícia
Encerts
9
Errors
7
No contestades
3
Certesa
47.4%
Mitjana
86.7%
Hematologia
Encerts
5
Errors
2
No contestades
4
Certesa
45.5%
Mitjana
82.7%
Immunologia
Encerts
5
Errors
2
No contestades
2
Certesa
55.6%
Mitjana
83.3%
Malalties Infeccioses
Encerts
11
Errors
9
No contestades
7
Certesa
40.7%
Mitjana
74.9%
Medicina Legal i Bioètica
Encerts
4
Errors
1
No contestades
0
Certesa
80.0%
Mitjana
68.4%
Nefrologia
Encerts
6
Errors
4
No contestades
4
Certesa
42.9%
Mitjana
84.8%
Neurologia
Encerts
8
Errors
6
No contestades
6
Certesa
40.0%
Mitjana
77.3%
Oftalmologia
Encerts
2
Errors
2
No contestades
1
Certesa
40.0%
Mitjana
74.2%
Oncologia Mèdica
Encerts
16
Errors
6
No contestades
3
Certesa
64.0%
Mitjana
87.2%
ORL
Encerts
4
Errors
1
No contestades
3
Certesa
50.0%
Mitjana
74.8%
Pediatria
Encerts
14
Errors
5
No contestades
7
Certesa
53.8%
Mitjana
71.9%
Planificació i Gestió Sanitària
Encerts
1
Errors
1
No contestades
0
Certesa
50.0%
Mitjana
82.6%
Pneumologia
Encerts
2
Errors
8
No contestades
4
Certesa
14.3%
Mitjana
80.4%
Psiquiatria
Encerts
5
Errors
3
No contestades
0
Certesa
62.5%
Mitjana
83.0%
Radiologia-Urgències
Encerts
2
Errors
9
No contestades
3
Certesa
14.3%
Mitjana
69.4%
Reumatologia
Encerts
7
Errors
6
No contestades
2
Certesa
46.7%
Mitjana
76.6%
Traumatologia
Encerts
6
Errors
8
No contestades
4
Certesa
33.3%
Mitjana
79.3%
Urologia
Encerts
4
Errors
2
No contestades
1
Certesa
57.1%
Mitjana
80.7%

Desglossament per Tipus de Pregunta

Anatomia
Encerts
3
Errors
3
No contestades
1
Certesa
42.9%
Mitjana
78.6%
Bioestadística
Encerts
2
Errors
2
No contestades
0
Certesa
50.0%
Mitjana
79.8%
Diagnòstic
Encerts
32
Errors
35
No contestades
21
Certesa
36.4%
Mitjana
79.9%
Epidemiologia
Encerts
2
Errors
3
No contestades
0
Certesa
40.0%
Mitjana
76.7%
Ètica
Encerts
2
Errors
1
No contestades
0
Certesa
66.7%
Mitjana
74.1%
Farmacologia
Encerts
7
Errors
6
No contestades
0
Certesa
53.8%
Mitjana
83.3%
Fisiopatologia
Encerts
9
Errors
9
No contestades
9
Certesa
33.3%
Mitjana
76.1%
Interpretació
Encerts
10
Errors
18
No contestades
14
Certesa
23.8%
Mitjana
70.7%
Legal
Encerts
3
Errors
1
No contestades
0
Certesa
75.0%
Mitjana
64.6%
Prevenció
Encerts
5
Errors
5
No contestades
2
Certesa
41.7%
Mitjana
75.6%
Pronòstic
Encerts
2
Errors
4
No contestades
1
Certesa
28.6%
Mitjana
80.8%
Proves
Encerts
8
Errors
15
No contestades
4
Certesa
29.6%
Mitjana
77.9%
Risc
Encerts
2
Errors
2
No contestades
1
Certesa
40.0%
Mitjana
85.2%
Tractament
Encerts
37
Errors
29
No contestades
15
Certesa
45.7%
Mitjana
77.3%
#RespostaCorrectaEstat
1B
2A
3C
4B
5A
6C
7C
8AA
9CA
10D
11BD
12DD
13AB
14DD
15Anul·lada
16CB
17B
18A
19CC
20BA
21B
22CD
23AC
24DD
25CC
26CAnul·lada
27CC
28DAnul·lada
29CD
30B
31D
32A
33D
34AD
35BB
36DD
37DC
38BC
39DD
40BA
41DD
42CC
43CB
44D
45BD
46AA
47AA
48DA
49DD
50BB
51DC
52CB
53DD
54DB
55AA
56Anul·lada
57CC
58AB
59DD
60BA
61CA
62DD
63BB
64DD
65A
66A
67BB
68B
69CB
70AA
71DD
72CA
73DD
74DC
75AA
76BB
77BB
78BB
79C
80CC
81CC
82CD
83DB
84DD
85AC
86BC
87BA
88DD
89BB
90DA
91DB
92C
93BB
94DC
95BA
96CC
97AD
98C
99A
100C
101B
102CD
103BA
104CC
105AA
106DC
107BB
108D
109DB
110C
111BA
112CC
113AB
114D
115D
116C
117CA
118CD
119DC
120AB
121CD
122CC
123CC
124CC
125CD
126BD
127AB
128DD
129BA
130D
131D
132CA
133BB
134C
135CB
136CC
137CA
138DD
139DD
140CB
141AA
142AA
143BB
144BB
145BD
146C
147BB
148A
149CA
150D
151AA
152AA
153B
154AB
155BB
156CC
157BA
158DC
159AC
160A
161DA
162Anul·lada
163DD
164C
165CA
166BB
167AC
168BD
169B
170AB
171BC
172A
173BA
174BB
175BB
176CC
177CC
178BA
179CD
180AA
181BB
182CC
183DB
184BB
185BB
186DAnul·lada
187CC
188CD
189BD
190BA
191CB
192BA
193AC
194BA
195AA
196AA
197BB
198CC
199DD
200CC
201B
202A
203DD
204BC
205DB
206DD
207AA
208C
209CC
210B