MedicalBenchmark
Mistral: Pixtral 12B provider

Pixtral 12B

246

#246 de 291 modelsMIR 2024

Puntuació neta

98.66 pts

Certesa

61.0%

Correctes / Incorrectes

122 / 70

Cost total

$0.02

Rendiment General

(vs. mitjana)
Certesa

61.0%

avg: 80.5%

Puntuació neta

98.66 pts

avg: 150.85 pts

Encerts

122

avg: 161

Errors

70

avg: 30

Cost total

$0.02

avg: $3.32

Temps mitjà de resposta

4.1s

avg: 16.4s

Tokens sortints

86K

avg: 427K

Tokens de raonament

0

avg: 310K

Confiança mitjana

95.3%

avg: 95.4%

Desglossament per Assignatura

Al·lergologia
Encerts
2
Errors
1
No contestades
0
Certesa
66.7%
Mitjana
90.5%
Anestesiologia i Reanimació
Encerts
3
Errors
0
No contestades
1
Certesa
75.0%
Mitjana
87.1%
Cardiologia
Encerts
11
Errors
10
No contestades
0
Certesa
52.4%
Mitjana
79.7%
Cures Pal·liatives
Encerts
2
Errors
2
No contestades
0
Certesa
50.0%
Mitjana
88.2%
Dermatologia
Encerts
11
Errors
3
No contestades
0
Certesa
78.6%
Mitjana
80.2%
Endocrinologia i Nutrició
Encerts
13
Errors
6
No contestades
0
Certesa
68.4%
Mitjana
84.2%
Epidemiologia
Encerts
7
Errors
1
No contestades
0
Certesa
87.5%
Mitjana
89.3%
Estadística
Encerts
3
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
91.1%
Farmacologia
Encerts
18
Errors
3
No contestades
2
Certesa
78.3%
Mitjana
85.4%
Gastroenterologia
Encerts
10
Errors
11
No contestades
1
Certesa
45.5%
Mitjana
70.5%
Genètica
Encerts
5
Errors
1
No contestades
1
Certesa
71.4%
Mitjana
86.5%
Geriatria
Encerts
7
Errors
3
No contestades
0
Certesa
70.0%
Mitjana
86.9%
Ginecologia i Obstetrícia
Encerts
9
Errors
4
No contestades
1
Certesa
64.3%
Mitjana
81.2%
Hematologia
Encerts
9
Errors
3
No contestades
1
Certesa
69.2%
Mitjana
81.5%
Immunologia
Encerts
5
Errors
3
No contestades
0
Certesa
62.5%
Mitjana
89.1%
Malalties Infeccioses
Encerts
17
Errors
4
No contestades
2
Certesa
73.9%
Mitjana
81.8%
Medicina Legal i Bioètica
Encerts
2
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
91.7%
Nefrologia
Encerts
4
Errors
9
No contestades
0
Certesa
30.8%
Mitjana
80.8%
Neurologia
Encerts
13
Errors
7
No contestades
2
Certesa
59.1%
Mitjana
83.7%
Oftalmologia
Encerts
2
Errors
3
No contestades
0
Certesa
40.0%
Mitjana
80.0%
Oncologia Mèdica
Encerts
14
Errors
6
No contestades
1
Certesa
66.7%
Mitjana
80.2%
ORL
Encerts
4
Errors
3
No contestades
0
Certesa
57.1%
Mitjana
74.4%
Pediatria
Encerts
10
Errors
6
No contestades
1
Certesa
58.8%
Mitjana
82.0%
Planificació i Gestió Sanitària
Encerts
2
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
73.2%
Pneumologia
Encerts
10
Errors
7
No contestades
2
Certesa
52.6%
Mitjana
80.6%
Psiquiatria
Encerts
6
Errors
2
No contestades
2
Certesa
60.0%
Mitjana
89.5%
Radiologia-Urgències
Encerts
6
Errors
8
No contestades
0
Certesa
42.9%
Mitjana
64.9%
Reumatologia
Encerts
8
Errors
6
No contestades
0
Certesa
57.1%
Mitjana
81.4%
Traumatologia
Encerts
8
Errors
7
No contestades
0
Certesa
53.3%
Mitjana
74.5%
Urologia
Encerts
2
Errors
4
No contestades
0
Certesa
33.3%
Mitjana
78.2%

Desglossament per Tipus de Pregunta

Anatomia
Encerts
3
Errors
3
No contestades
0
Certesa
50.0%
Mitjana
79.8%
Bioestadística
Encerts
5
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
90.7%
Diagnòstic
Encerts
41
Errors
29
No contestades
3
Certesa
56.2%
Mitjana
79.2%
Epidemiologia
Encerts
7
Errors
4
No contestades
1
Certesa
58.3%
Mitjana
81.2%
Ètica
Encerts
1
Errors
0
No contestades
0
Certesa
100.0%
Mitjana
94.5%
Farmacologia
Encerts
19
Errors
4
No contestades
2
Certesa
76.0%
Mitjana
84.0%
Fisiopatologia
Encerts
20
Errors
10
No contestades
3
Certesa
60.6%
Mitjana
85.4%
Interpretació
Encerts
18
Errors
19
No contestades
0
Certesa
48.6%
Mitjana
69.6%
Prevenció
Encerts
11
Errors
0
No contestades
1
Certesa
91.7%
Mitjana
89.8%
Pronòstic
Encerts
5
Errors
2
No contestades
0
Certesa
71.4%
Mitjana
83.9%
Proves
Encerts
9
Errors
12
No contestades
0
Certesa
42.9%
Mitjana
73.9%
Risc
Encerts
9
Errors
3
No contestades
1
Certesa
69.2%
Mitjana
83.6%
Tractament
Encerts
47
Errors
23
No contestades
1
Certesa
66.2%
Mitjana
81.3%
#RespostaCorrectaEstat
1AB
2CD
3DB
4CC
5CC
6BB
7CD
8CC
9BA
10DD
11DD
12BA
13DC
14DA
15CB
16CA
17CC
18AA
19BB
20CC
21CD
22DB
23AA
24BA
25AC
26B
27CC
28DA
29AB
30DC
31AD
32BA
33CC
34BB
35DD
36BD
37AA
38DA
39CC
40BB
41CC
42AD
43AA
44DD
45DD
46BB
47CC
48CC
49B
50CC
51DA
52DD
53C
54BB
55CC
56DD
57AA
58BA
59CA
60DA
61AA
62BD
63DD
64AAnul·lada
65DD
66CC
67CB
68BAnul·lada
69AA
70BB
71BB
72DD
73CB
74CC
75B
76DA
77AD
78CC
79DB
80AA
81CC
82DC
83BB
84CC
85AA
86AA
87BB
88CD
89B
90AA
91DD
92AA
93CC
94BB
95DD
96BB
97BB
98DB
99AA
100DB
101AA
102DD
103BB
104CD
105BB
106DC
107CC
108BB
109AD
110AD
111BB
112CC
113BAnul·lada
114BD
115DD
116AA
117DD
118BD
119CA
120CC
121AA
122DB
123DD
124DD
125CB
126DD
127AA
128DB
129DD
130AC
131AC
132DD
133CA
134CC
135AA
136DD
137AA
138CC
139AA
140CC
141DB
142DC
143AA
144AD
145DC
146BC
147BC
148AA
149DC
150DD
151A
152A
153CC
154BB
155DD
156CC
157CC
158DD
159DD
160BB
161BB
162DB
163BB
164BB
165BA
166DC
167DA
168BB
169CC
170AA
171DD
172BB
173CA
174BB
175AA
176CC
177CC
178BB
179CC
180BAnul·lada
181CB
182DD
183AC
184AA
185DC
186DD
187CA
188CC
189BD
190DD
191BB
192BB
193AC
194DC
195C
196BB
197CA
198BB
199DD
200AA
201BB
202DD
203CB
204DD
205D
206BAnul·lada
207DA
208DA
209CB
210AD