MedicalBenchmark
Sao10K: Llama 3.1 70B Hanami x1 provider

Llama 3.1 70B Hanami x1

241

#241 de 319 modelsMIR 2025

Puntuació neta

131.66 pts

Certesa

73.5%

Correctes / Incorrectes

147 / 46

Cost total

$0.63

Rendiment General

(vs. mitjana)
Certesa

73.5%

avg: 77.9%

Puntuació neta

131.66 pts

avg: 143.96 pts

Encerts

147

avg: 156

Errors

46

avg: 35

Cost total

$0.63

avg: $3.36

Temps mitjà de resposta

31.8s

avg: 19.0s

Tokens sortints

105K

avg: 430K

Tokens de raonament

0

avg: 306K

Confiança mitjana

94.1%

avg: 95.2%

Desglossament per Assignatura

Al·lergologia
Encerts
4
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
87.9%
Anestesiologia i Reanimació
Encerts
5
Errors
1
No contestades
0
Certesa
83.3%
Mitjana
82.3%
Cardiologia
Encerts
19
Errors
2
No contestades
1
Certesa
86.4%
Mitjana
78.6%
Cures Pal·liatives
Encerts
4
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
78.6%
Dermatologia
Encerts
9
Errors
1
No contestades
2
Certesa
75.0%
Mitjana
69.4%
Endocrinologia i Nutrició
Encerts
13
Errors
3
No contestades
0
Certesa
81.3%
Mitjana
83.5%
Epidemiologia
Encerts
3
Errors
4
No contestades
0
Certesa
42.9%
Mitjana
69.1%
Estadística
Encerts
1
Errors
2
No contestades
0
Certesa
33.3%
Mitjana
76.6%
Farmacologia
Encerts
14
Errors
2
No contestades
1
Certesa
82.4%
Mitjana
74.1%
Gastroenterologia
Encerts
13
Errors
7
No contestades
1
Certesa
61.9%
Mitjana
74.1%
Genètica
Encerts
3
Errors
3
No contestades
0
Certesa
50.0%
Mitjana
69.5%
Geriatria
Encerts
9
Errors
2
No contestades
0
Certesa
81.8%
Mitjana
77.5%
Ginecologia i Obstetrícia
Encerts
17
Errors
2
No contestades
0
Certesa
89.5%
Mitjana
86.7%
Hematologia
Encerts
8
Errors
3
No contestades
0
Certesa
72.7%
Mitjana
82.7%
Immunologia
Encerts
7
Errors
2
No contestades
0
Certesa
77.8%
Mitjana
83.3%
Malalties Infeccioses
Encerts
20
Errors
5
No contestades
2
Certesa
74.1%
Mitjana
74.9%
Medicina Legal i Bioètica
Encerts
3
Errors
2
No contestades
0
Certesa
60.0%
Mitjana
68.4%
Nefrologia
Encerts
10
Errors
4
No contestades
0
Certesa
71.4%
Mitjana
84.8%
Neurologia
Encerts
10
Errors
8
No contestades
2
Certesa
50.0%
Mitjana
77.3%
Oftalmologia
Encerts
3
Errors
2
No contestades
0
Certesa
60.0%
Mitjana
74.2%
Oncologia Mèdica
Encerts
22
Errors
3
No contestades
0
Certesa
88.0%
Mitjana
87.2%
ORL
Encerts
5
Errors
2
No contestades
1
Certesa
62.5%
Mitjana
74.8%
Pediatria
Encerts
17
Errors
7
No contestades
2
Certesa
65.4%
Mitjana
71.9%
Planificació i Gestió Sanitària
Encerts
2
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
82.6%
Pneumologia
Encerts
13
Errors
1
No contestades
0
Certesa
92.9%
Mitjana
80.4%
Psiquiatria
Encerts
7
Errors
1
No contestades
0
Certesa
87.5%
Mitjana
83.0%
Radiologia-Urgències
Encerts
8
Errors
4
No contestades
2
Certesa
57.1%
Mitjana
69.4%
Reumatologia
Encerts
12
Errors
3
No contestades
0
Certesa
80.0%
Mitjana
76.6%
Traumatologia
Encerts
11
Errors
6
No contestades
1
Certesa
61.1%
Mitjana
79.3%
Urologia
Encerts
6
Errors
1
No contestades
0
Certesa
85.7%
Mitjana
80.7%

Desglossament per Tipus de Pregunta

Anatomia
Encerts
5
Errors
2
No contestades
0
Certesa
71.4%
Mitjana
78.6%
Bioestadística
Encerts
2
Errors
2
No contestades
0
Certesa
50.0%
Mitjana
79.8%
Diagnòstic
Encerts
63
Errors
20
No contestades
5
Certesa
71.6%
Mitjana
79.9%
Epidemiologia
Encerts
3
Errors
2
No contestades
0
Certesa
60.0%
Mitjana
76.7%
Ètica
Encerts
2
Errors
1
No contestades
0
Certesa
66.7%
Mitjana
74.1%
Farmacologia
Encerts
12
Errors
1
No contestades
0
Certesa
92.3%
Mitjana
83.3%
Fisiopatologia
Encerts
19
Errors
8
No contestades
0
Certesa
70.4%
Mitjana
76.1%
Interpretació
Encerts
24
Errors
16
No contestades
2
Certesa
57.1%
Mitjana
70.7%
Legal
Encerts
2
Errors
2
No contestades
0
Certesa
50.0%
Mitjana
64.6%
Prevenció
Encerts
7
Errors
4
No contestades
1
Certesa
58.3%
Mitjana
75.6%
Pronòstic
Encerts
6
Errors
1
No contestades
0
Certesa
85.7%
Mitjana
80.8%
Proves
Encerts
23
Errors
4
No contestades
0
Certesa
85.2%
Mitjana
77.9%
Risc
Encerts
5
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
85.2%
Tractament
Encerts
62
Errors
17
No contestades
2
Certesa
76.5%
Mitjana
77.3%
#RespostaCorrectaEstat
1BB
2DA
3CC
4AB
5AA
6C
7CC
8AA
9CA
10DD
11CD
12DD
13BB
14DD
15BAnul·lada
16CB
17CB
18CA
19C
20AA
21CB
22DD
23AC
24DD
25CC
26DAnul·lada
27DC
28CAnul·lada
29DD
30BB
31DD
32AA
33DD
34DD
35BB
36DD
37AC
38CC
39DD
40BA
41DD
42CC
43DB
44DD
45AD
46AA
47AA
48AA
49D
50BB
51CC
52BB
53DD
54DB
55AA
56BAnul·lada
57CC
58BB
59DD
60AA
61AA
62DD
63BB
64DD
65AA
66AA
67AB
68BB
69AB
70AA
71D
72AA
73DD
74CC
75AA
76BB
77BB
78BB
79AC
80CC
81CC
82CD
83AB
84CD
85C
86CC
87CA
88CD
89BB
90DA
91DB
92DC
93BB
94CC
95AA
96CC
97DD
98C
99BA
100CC
101BB
102DD
103AA
104CC
105AA
106CC
107BB
108DD
109BB
110CC
111AA
112CC
113BB
114DD
115DD
116CC
117AA
118DD
119AC
120BB
121BD
122CC
123CC
124CC
125CD
126BD
127BB
128DD
129AA
130DD
131BD
132AA
133BB
134CC
135BB
136CC
137CA
138DD
139DD
140DB
141AA
142BA
143BB
144BB
145DD
146CC
147BB
148BA
149DA
150DD
151AA
152AA
153BB
154BB
155BB
156CC
157AA
158DC
159CC
160A
161AA
162AAnul·lada
163DD
164CC
165AA
166BB
167CC
168DD
169CB
170BB
171CC
172BA
173BA
174BB
175BB
176CC
177CC
178BA
179DD
180AA
181DB
182CC
183BB
184BB
185BB
186DAnul·lada
187DC
188DD
189DD
190AA
191BB
192AA
193CC
194AA
195AA
196AA
197BB
198CC
199DD
200CC
201BB
202AA
203DD
204DC
205BB
206CD
207AA
208C
209CC
210BB