MedicalBenchmark
Qwen: Qwen2.5-VL 7B Instruct provider

Qwen2.5-VL 7B Instruct

292

#292 de 320 modelos — MIR 2024

Puntuación neta

60.66 pts

Certeza

45.0%

Correctas / Incorrectas

90 / 88

Custo total

$0.04

Rendemento Xeral

(vs. media)
Certeza

45.0%

avg: 81.3%

Puntuación neta

60.66 pts

avg: 153.08 pts

Acertos

90

avg: 163

Erros

88

avg: 29

Custo total

$0.04

avg: $3.09

Tempo promedio de resposta

7.3s

avg: 17.7s

Tokens saíntes

104K

avg: 414K

Tokens de razoamento

0

avg: 296K

Confianza promedia

87.0%

avg: 95.7%

Desglose por Materia

Alerxoloxía
Acertos
2
Erros
1
Non contestadas
0
Certeza
66.7%
Media
90.8%
Anestesioloxía e Reanimación
Acertos
3
Erros
1
Non contestadas
0
Certeza
75.0%
Media
87.7%
Cardioloxía
Acertos
6
Erros
12
Non contestadas
3
Certeza
28.6%
Media
80.4%
Coidados Paliativos
Acertos
2
Erros
0
Non contestadas
2
Certeza
50.0%
Media
88.6%
Dermatoloxía
Acertos
8
Erros
5
Non contestadas
1
Certeza
57.1%
Media
81.0%
Endocrinoloxía e Nutrición
Acertos
10
Erros
9
Non contestadas
0
Certeza
52.6%
Media
85.1%
Enfermidades Infecciosas
Acertos
12
Erros
10
Non contestadas
1
Certeza
52.2%
Media
82.5%
Epidemioloxía
Acertos
5
Erros
2
Non contestadas
1
Certeza
62.5%
Media
89.7%
Estatística
Acertos
1
Erros
1
Non contestadas
1
Certeza
33.3%
Media
91.6%
Farmacoloxía
Acertos
12
Erros
7
Non contestadas
4
Certeza
52.2%
Media
85.8%
Gastroenteroloxía
Acertos
9
Erros
12
Non contestadas
1
Certeza
40.9%
Media
71.5%
Hematoloxía
Acertos
5
Erros
4
Non contestadas
4
Certeza
38.5%
Media
82.4%
Inmunoloxía
Acertos
5
Erros
2
Non contestadas
1
Certeza
62.5%
Media
89.7%
Medicina Legal e Bioética
Acertos
2
Erros
0
Non contestadas
0
Certeza
100.0%
Media
91.8%
Nefroloxía
Acertos
2
Erros
9
Non contestadas
2
Certeza
15.4%
Media
81.8%
Neuroloxía
Acertos
11
Erros
7
Non contestadas
4
Certeza
50.0%
Media
84.5%
Oftalmoloxía
Acertos
2
Erros
3
Non contestadas
0
Certeza
40.0%
Media
81.3%
Oncoloxía Médica
Acertos
14
Erros
6
Non contestadas
1
Certeza
66.7%
Media
80.9%
ORL
Acertos
4
Erros
2
Non contestadas
1
Certeza
57.1%
Media
75.1%
Pediatría
Acertos
6
Erros
8
Non contestadas
3
Certeza
35.3%
Media
82.9%
Planificación e Xestión Sanitaria
Acertos
0
Erros
2
Non contestadas
0
Certeza
0.0%
Media
75.1%
Pneumoloxía
Acertos
7
Erros
11
Non contestadas
1
Certeza
36.8%
Media
81.6%
Psiquiatría
Acertos
5
Erros
3
Non contestadas
2
Certeza
50.0%
Media
90.0%
Radioloxía-Urxencias
Acertos
8
Erros
6
Non contestadas
0
Certeza
57.1%
Media
66.0%
Reumatoloxía
Acertos
7
Erros
6
Non contestadas
1
Certeza
50.0%
Media
82.4%
Traumatoloxía
Acertos
9
Erros
5
Non contestadas
1
Certeza
60.0%
Media
75.4%
Uroloxía
Acertos
2
Erros
4
Non contestadas
0
Certeza
33.3%
Media
79.0%
Xenética
Acertos
3
Erros
3
Non contestadas
1
Certeza
42.9%
Media
87.1%
Xeriatría
Acertos
6
Erros
3
Non contestadas
1
Certeza
60.0%
Media
87.7%
Xinecoloxía e Obstetricia
Acertos
8
Erros
4
Non contestadas
2
Certeza
57.1%
Media
82.0%

Desglose por Tipo de Pregunta

Anatomía
Acertos
3
Erros
3
Non contestadas
0
Certeza
50.0%
Media
81.1%
Bioestatística
Acertos
2
Erros
2
Non contestadas
1
Certeza
40.0%
Media
91.3%
Diagnóstico
Acertos
34
Erros
31
Non contestadas
8
Certeza
46.6%
Media
80.0%
Epidemioloxía
Acertos
6
Erros
4
Non contestadas
2
Certeza
50.0%
Media
82.1%
Ética
Acertos
1
Erros
0
Non contestadas
0
Certeza
100.0%
Media
94.0%
Farmacoloxía
Acertos
16
Erros
5
Non contestadas
4
Certeza
64.0%
Media
84.7%
Fisiopatoloxía
Acertos
14
Erros
16
Non contestadas
3
Certeza
42.4%
Media
86.1%
Interpretación
Acertos
15
Erros
18
Non contestadas
4
Certeza
40.5%
Media
70.5%
Prevención
Acertos
7
Erros
5
Non contestadas
0
Certeza
58.3%
Media
90.3%
Probas
Acertos
10
Erros
10
Non contestadas
1
Certeza
47.6%
Media
75.0%
Prognóstico
Acertos
2
Erros
4
Non contestadas
1
Certeza
28.6%
Media
84.6%
Risco
Acertos
8
Erros
5
Non contestadas
0
Certeza
61.5%
Media
84.5%
Tratamento
Acertos
33
Erros
31
Non contestadas
7
Certeza
46.5%
Media
82.1%
#RespostaCorrectaEstado
1BB
2DD
3DB
4AC
5CC
6DB
7DD
8CC
9AA
10DD
11BD
12AA
13CC
14DA
15CB
16DA
17—C
18AA
19AB
20AC
21DD
22AB
23AA
24CA
25AC
26BB
27CC
28DA
29AB
30DC
31AD
32BA
33CC
34CB
35DD
36BD
37AA
38BA
39CC
40BB
41BC
42BD
43DA
44—D
45AD
46BB
47CC
48CC
49AB
50—C
51AA
52DD
53AC
54BB
55CC
56DD
57CA
58BA
59BA
60AA
61AA
62—D
63CD
64D—Anulada
65DD
66CC
67BB
68B—Anulada
69AA
70AB
71AB
72BD
73CB
74AC
75BB
76AA
77—D
78DC
79CB
80AA
81DC
82CC
83BB
84DC
85AA
86AA
87AB
88—D
89CB
90AA
91—D
92DA
93AC
94BB
95DD
96BB
97BB
98—B
99AA
100BB
101AA
102DD
103BB
104AD
105DB
106—C
107CC
108BB
109AD
110CD
111—B
112BC
113B—Anulada
114BD
115DD
116DA
117BD
118—D
119CA
120—C
121AA
122AB
123BD
124DD
125AB
126AD
127CA
128DB
129CD
130CC
131BC
132DD
133CA
134BC
135DA
136DD
137AA
138BC
139BA
140CC
141DB
142BC
143—A
144DD
145BC
146BC
147CC
148BA
149BC
150DD
151AA
152—A
153DC
154BB
155—D
156—C
157—C
158DD
159DD
160BB
161DB
162BB
163BB
164CB
165CA
166DC
167AA
168BB
169CC
170CA
171DD
172AB
173CA
174—B
175AA
176CC
177—C
178BB
179CC
180A—Anulada
181AB
182DD
183CC
184—A
185—C
186DD
187CA
188CC
189BD
190DD
191BB
192DB
193AC
194DC
195CC
196BB
197AA
198BB
199DD
200AA
201AB
202BD
203—B
204AD
205DD
206B—Anulada
207BA
208AA
209—B
210AD