MedicalBenchmark
Meta: Llama 3 70B Instruct provider

Llama 3 70B Instruct

224

#224 de 290 modelsMIR 2025

Puntuació neta

118.66 pts

Certesa

66.5%

Correctes / Incorrectes

133 / 43

Cost total

$0.09

Rendiment General

(vs. mitjana)
Certesa

66.5%

avg: 75.9%

Puntuació neta

118.66 pts

avg: 138.99 pts

Encerts

133

avg: 152

Errors

43

avg: 38

Cost total

$0.09

avg: $3.59

Temps mitjà de resposta

12.5s

avg: 18.1s

Tokens eixints

64K

avg: 443K

Tokens de raonament

0

avg: 320K

Confiança mitjana

88.5%

avg: 94.7%

Desglossament per Assignatura

Al·lergologia
Encerts
3
Errors
0
No contestades
1
Certesa
75.0%
Mitjana
86.9%
Anestesiologia i Reanimació
Encerts
4
Errors
1
No contestades
1
Certesa
66.7%
Mitjana
81.3%
Cardiologia
Encerts
18
Errors
1
No contestades
3
Certesa
81.8%
Mitjana
77.4%
Cures Pal·liatives
Encerts
3
Errors
0
No contestades
1
Certesa
75.0%
Mitjana
77.2%
Dermatologia
Encerts
7
Errors
2
No contestades
4
Certesa
53.8%
Mitjana
62.8%
Endocrinologia i Nutrició
Encerts
12
Errors
2
No contestades
2
Certesa
75.0%
Mitjana
82.5%
Epidemiologia
Encerts
2
Errors
4
No contestades
1
Certesa
28.6%
Mitjana
67.1%
Estadística
Encerts
0
Errors
2
No contestades
1
Certesa
0.0%
Mitjana
74.9%
Farmacologia
Encerts
14
Errors
2
No contestades
1
Certesa
82.4%
Mitjana
73.1%
Gastroenterologia
Encerts
12
Errors
8
No contestades
1
Certesa
57.1%
Mitjana
72.9%
Genètica
Encerts
4
Errors
2
No contestades
0
Certesa
66.7%
Mitjana
68.2%
Geriatria
Encerts
8
Errors
1
No contestades
2
Certesa
72.7%
Mitjana
71.2%
Ginecologia i Obstetrícia
Encerts
17
Errors
0
No contestades
2
Certesa
89.5%
Mitjana
85.9%
Hematologia
Encerts
8
Errors
3
No contestades
0
Certesa
72.7%
Mitjana
81.8%
Immunologia
Encerts
7
Errors
2
No contestades
0
Certesa
77.8%
Mitjana
82.5%
Malalties Infeccioses
Encerts
17
Errors
8
No contestades
3
Certesa
60.7%
Mitjana
71.1%
Medicina Legal i Bioètica
Encerts
2
Errors
1
No contestades
2
Certesa
40.0%
Mitjana
67.2%
Nefrologia
Encerts
12
Errors
3
No contestades
0
Certesa
80.0%
Mitjana
78.2%
Neurologia
Encerts
13
Errors
4
No contestades
3
Certesa
65.0%
Mitjana
76.2%
Oftalmologia
Encerts
2
Errors
2
No contestades
1
Certesa
40.0%
Mitjana
72.6%
Oncologia Mèdica
Encerts
20
Errors
2
No contestades
3
Certesa
80.0%
Mitjana
86.3%
ORL
Encerts
6
Errors
1
No contestades
1
Certesa
75.0%
Mitjana
73.8%
Pediatria
Encerts
16
Errors
6
No contestades
3
Certesa
64.0%
Mitjana
72.7%
Planificació i Gestió Sanitària
Encerts
2
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
81.6%
Pneumologia
Encerts
9
Errors
3
No contestades
2
Certesa
64.3%
Mitjana
73.0%
Psiquiatria
Encerts
6
Errors
2
No contestades
0
Certesa
75.0%
Mitjana
82.0%
Radiologia-Urgències
Encerts
8
Errors
4
No contestades
2
Certesa
57.1%
Mitjana
67.9%
Reumatologia
Encerts
7
Errors
7
No contestades
0
Certesa
50.0%
Mitjana
74.6%
Traumatologia
Encerts
10
Errors
6
No contestades
2
Certesa
55.6%
Mitjana
78.2%
Urologia
Encerts
4
Errors
1
No contestades
2
Certesa
57.1%
Mitjana
79.5%

Desglossament per Tipus de Pregunta

Anatomia
Encerts
4
Errors
1
No contestades
2
Certesa
57.1%
Mitjana
77.1%
Bioestadística
Encerts
1
Errors
2
No contestades
1
Certesa
25.0%
Mitjana
78.4%
Diagnòstic
Encerts
62
Errors
19
No contestades
8
Certesa
69.7%
Mitjana
77.9%
Epidemiologia
Encerts
3
Errors
2
No contestades
0
Certesa
60.0%
Mitjana
75.0%
Ètica
Encerts
1
Errors
0
No contestades
2
Certesa
33.3%
Mitjana
72.0%
Farmacologia
Encerts
11
Errors
1
No contestades
1
Certesa
84.6%
Mitjana
82.4%
Fisiopatologia
Encerts
20
Errors
6
No contestades
1
Certesa
74.1%
Mitjana
72.6%
Interpretació
Encerts
26
Errors
10
No contestades
6
Certesa
61.9%
Mitjana
69.3%
Legal
Encerts
2
Errors
1
No contestades
1
Certesa
50.0%
Mitjana
63.6%
Prevenció
Encerts
9
Errors
2
No contestades
1
Certesa
75.0%
Mitjana
74.5%
Pronòstic
Encerts
4
Errors
1
No contestades
1
Certesa
66.7%
Mitjana
77.8%
Proves
Encerts
15
Errors
6
No contestades
5
Certesa
57.7%
Mitjana
76.3%
Risc
Encerts
5
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
84.3%
Tractament
Encerts
51
Errors
18
No contestades
13
Certesa
62.2%
Mitjana
75.2%
#RespostaCorrectaEstat
1BB
2A
3CC
4B
5AA
6C
7CC
8CA
9CA
10DD
11DD
12DD
13BB
14DD
15B
16CB
17CB
18CA
19CC
20BA
21BB
22CD
23AC
24DD
25C
26Anul·lada
27DC
28CAnul·lada
29DD
30BB
31DD
32AA
33DD
34DD
35BB
36DD
37BC
38CC
39DD
40BA
41BD
42CC
43DB
44DD
45D
46AA
47A
48A
49DD
50B
51DC
52BB
53DD
54DB
55AA
56BAnul·lada
57CC
58BB
59DD
60AA
61AA
62DD
63BB
64DD
65AA
66AA
67BB
68BB
69AB
70AA
71D
72CA
73CD
74CC
75AA
76BB
77BB
78BB
79AC
80CC
81CC
82CD
83BB
84DD
85AC
86CC
87CA
88AD
89BB
90A
91B
92BC
93BB
94CC
95AA
96CC
97DD
98CC
99AA
100CC
101BB
102DD
103AA
104CC
105AA
106CC
107BB
108DD
109BB
110CC
111AA
112CC
113B
114DD
115D
116CC
117A
118DD
119AC
120BB
121BD
122CC
123CC
124CC
125BD
126BD
127AB
128DD
129AA
130DD
131DD
132AA
133BB
134CC
135CB
136CC
137A
138D
139DD
140BB
141AA
142AA
143BB
144BB
145DD
146CC
147BB
148BA
149DA
150AA
151AA
152AA
153BB
154BB
155BB
156C
157AA
158CC
159BC
160AA
161AA
162
163DD
164CC
165DA
166CB
167CC
168BD
169CB
170BB
171CC
172BA
173AA
174BB
175BB
176AC
177CC
178A
179DD
180AA
181DB
182C
183B
184B
185BB
186DAnul·lada
187CC
188DD
189DD
190AA
191BB
192AA
193CC
194AA
195AA
196AA
197BB
198C
199DD
200CC
201AB
202BA
203DD
204C
205BB
206CD
207A
208BC
209CC
210BB