MedicalBenchmark
Qwen: Qwen2.5-VL 7B Instruct provider

Qwen2.5-VL 7B Instruct

264

#264 de 291 modelosMIR 2024

Puntuación neta

60.66 pts

Certeza

45.0%

Correctas / Incorrectas

90 / 88

Custo total

$0.04

Rendemento Xeral

(vs. media)
Certeza

45.0%

avg: 80.5%

Puntuación neta

60.66 pts

avg: 150.85 pts

Acertos

90

avg: 161

Erros

88

avg: 30

Custo total

$0.04

avg: $3.32

Tempo promedio de resposta

7.3s

avg: 16.4s

Tokens saíntes

104K

avg: 427K

Tokens de razoamento

0

avg: 310K

Confianza promedia

87.0%

avg: 95.4%

Desglose por Materia

Alerxoloxía
Acertos
2
Erros
1
Non contestadas
0
Certeza
66.7%
Media
90.5%
Anestesioloxía e Reanimación
Acertos
3
Erros
1
Non contestadas
0
Certeza
75.0%
Media
87.1%
Cardioloxía
Acertos
6
Erros
12
Non contestadas
3
Certeza
28.6%
Media
79.7%
Coidados Paliativos
Acertos
2
Erros
0
Non contestadas
2
Certeza
50.0%
Media
88.2%
Dermatoloxía
Acertos
8
Erros
5
Non contestadas
1
Certeza
57.1%
Media
80.2%
Endocrinoloxía e Nutrición
Acertos
10
Erros
9
Non contestadas
0
Certeza
52.6%
Media
84.2%
Enfermidades Infecciosas
Acertos
12
Erros
10
Non contestadas
1
Certeza
52.2%
Media
81.8%
Epidemioloxía
Acertos
5
Erros
2
Non contestadas
1
Certeza
62.5%
Media
89.3%
Estatística
Acertos
1
Erros
1
Non contestadas
1
Certeza
33.3%
Media
91.1%
Farmacoloxía
Acertos
12
Erros
7
Non contestadas
4
Certeza
52.2%
Media
85.4%
Gastroenteroloxía
Acertos
9
Erros
12
Non contestadas
1
Certeza
40.9%
Media
70.5%
Hematoloxía
Acertos
5
Erros
4
Non contestadas
4
Certeza
38.5%
Media
81.5%
Inmunoloxía
Acertos
5
Erros
2
Non contestadas
1
Certeza
62.5%
Media
89.1%
Medicina Legal e Bioética
Acertos
2
Erros
0
Non contestadas
0
Certeza
100.0%
Media
91.7%
Nefroloxía
Acertos
2
Erros
9
Non contestadas
2
Certeza
15.4%
Media
80.8%
Neuroloxía
Acertos
11
Erros
7
Non contestadas
4
Certeza
50.0%
Media
83.7%
Oftalmoloxía
Acertos
2
Erros
3
Non contestadas
0
Certeza
40.0%
Media
80.0%
Oncoloxía Médica
Acertos
14
Erros
6
Non contestadas
1
Certeza
66.7%
Media
80.2%
ORL
Acertos
4
Erros
2
Non contestadas
1
Certeza
57.1%
Media
74.4%
Pediatría
Acertos
6
Erros
8
Non contestadas
3
Certeza
35.3%
Media
82.0%
Planificación e Xestión Sanitaria
Acertos
0
Erros
2
Non contestadas
0
Certeza
0.0%
Media
73.2%
Pneumoloxía
Acertos
7
Erros
11
Non contestadas
1
Certeza
36.8%
Media
80.6%
Psiquiatría
Acertos
5
Erros
3
Non contestadas
2
Certeza
50.0%
Media
89.5%
Radioloxía-Urxencias
Acertos
8
Erros
6
Non contestadas
0
Certeza
57.1%
Media
64.9%
Reumatoloxía
Acertos
7
Erros
6
Non contestadas
1
Certeza
50.0%
Media
81.4%
Traumatoloxía
Acertos
9
Erros
5
Non contestadas
1
Certeza
60.0%
Media
74.5%
Uroloxía
Acertos
2
Erros
4
Non contestadas
0
Certeza
33.3%
Media
78.2%
Xenética
Acertos
3
Erros
3
Non contestadas
1
Certeza
42.9%
Media
86.5%
Xeriatría
Acertos
6
Erros
3
Non contestadas
1
Certeza
60.0%
Media
86.9%
Xinecoloxía e Obstetricia
Acertos
8
Erros
4
Non contestadas
2
Certeza
57.1%
Media
81.2%

Desglose por Tipo de Pregunta

Anatomía
Acertos
3
Erros
3
Non contestadas
0
Certeza
50.0%
Media
79.8%
Bioestatística
Acertos
2
Erros
2
Non contestadas
1
Certeza
40.0%
Media
90.7%
Diagnóstico
Acertos
34
Erros
31
Non contestadas
8
Certeza
46.6%
Media
79.2%
Epidemioloxía
Acertos
6
Erros
4
Non contestadas
2
Certeza
50.0%
Media
81.2%
Ética
Acertos
1
Erros
0
Non contestadas
0
Certeza
100.0%
Media
94.5%
Farmacoloxía
Acertos
16
Erros
5
Non contestadas
4
Certeza
64.0%
Media
84.0%
Fisiopatoloxía
Acertos
14
Erros
16
Non contestadas
3
Certeza
42.4%
Media
85.4%
Interpretación
Acertos
15
Erros
18
Non contestadas
4
Certeza
40.5%
Media
69.6%
Prevención
Acertos
7
Erros
5
Non contestadas
0
Certeza
58.3%
Media
89.8%
Probas
Acertos
10
Erros
10
Non contestadas
1
Certeza
47.6%
Media
73.9%
Prognóstico
Acertos
2
Erros
4
Non contestadas
1
Certeza
28.6%
Media
83.9%
Risco
Acertos
8
Erros
5
Non contestadas
0
Certeza
61.5%
Media
83.6%
Tratamento
Acertos
33
Erros
31
Non contestadas
7
Certeza
46.5%
Media
81.3%
#RespostaCorrectaEstado
1BB
2DD
3DB
4AC
5CC
6DB
7DD
8CC
9AA
10DD
11BD
12AA
13CC
14DA
15CB
16DA
17C
18AA
19AB
20AC
21DD
22AB
23AA
24CA
25AC
26BB
27CC
28DA
29AB
30DC
31AD
32BA
33CC
34CB
35DD
36BD
37AA
38BA
39CC
40BB
41BC
42BD
43DA
44D
45AD
46BB
47CC
48CC
49AB
50C
51AA
52DD
53AC
54BB
55CC
56DD
57CA
58BA
59BA
60AA
61AA
62D
63CD
64DAnulada
65DD
66CC
67BB
68BAnulada
69AA
70AB
71AB
72BD
73CB
74AC
75BB
76AA
77D
78DC
79CB
80AA
81DC
82CC
83BB
84DC
85AA
86AA
87AB
88D
89CB
90AA
91D
92DA
93AC
94BB
95DD
96BB
97BB
98B
99AA
100BB
101AA
102DD
103BB
104AD
105DB
106C
107CC
108BB
109AD
110CD
111B
112BC
113BAnulada
114BD
115DD
116DA
117BD
118D
119CA
120C
121AA
122AB
123BD
124DD
125AB
126AD
127CA
128DB
129CD
130CC
131BC
132DD
133CA
134BC
135DA
136DD
137AA
138BC
139BA
140CC
141DB
142BC
143A
144DD
145BC
146BC
147CC
148BA
149BC
150DD
151AA
152A
153DC
154BB
155D
156C
157C
158DD
159DD
160BB
161DB
162BB
163BB
164CB
165CA
166DC
167AA
168BB
169CC
170CA
171DD
172AB
173CA
174B
175AA
176CC
177C
178BB
179CC
180AAnulada
181AB
182DD
183CC
184A
185C
186DD
187CA
188CC
189BD
190DD
191BB
192DB
193AC
194DC
195CC
196BB
197AA
198BB
199DD
200AA
201AB
202BD
203B
204AD
205DD
206BAnulada
207BA
208AA
209B
210AD