MedicalBenchmark
AlfredPros: CodeLLaMa 7B Instruct Solidity provider

CodeLLaMa 7B Instruct Solidity

290

#290 de 290 modelos — MIR 2026

Puntuación neta

0.00 pts

Certeza

1.5%

Correctas / Incorrectas

3 / 21

Custo total

$0.32

Rendemento Xeral

(vs. media)
Certeza

1.5%

avg: 81.6%

Puntuación neta

0.00 pts

avg: 154.00 pts

Acertos

3

avg: 163

Erros

21

avg: 28

Custo total

$0.32

avg: $3.33

Tempo promedio de resposta

27.9s

avg: 16.2s

Tokens saíntes

185K

avg: 430K

Tokens de razoamento

0

avg: 310K

Confianza promedia

16.5%

avg: 95.1%

Desglose por Materia

Alerxoloxía
Acertos
0
Erros
0
Non contestadas
1
Certeza
0.0%
Media
96.9%
Anestesioloxía e Reanimación
Acertos
0
Erros
2
Non contestadas
5
Certeza
0.0%
Media
69.6%
Cardioloxía
Acertos
0
Erros
2
Non contestadas
23
Certeza
0.0%
Media
77.3%
Coidados Paliativos
Acertos
0
Erros
0
Non contestadas
6
Certeza
0.0%
Media
80.2%
Dermatoloxía
Acertos
0
Erros
1
Non contestadas
10
Certeza
0.0%
Media
72.3%
Endocrinoloxía e Nutrición
Acertos
0
Erros
3
Non contestadas
12
Certeza
0.0%
Media
84.0%
Enfermidades Infecciosas
Acertos
0
Erros
3
Non contestadas
11
Certeza
0.0%
Media
77.9%
Epidemioloxía
Acertos
0
Erros
2
Non contestadas
5
Certeza
0.0%
Media
80.2%
Estatística
Acertos
0
Erros
0
Non contestadas
2
Certeza
0.0%
Media
83.8%
Farmacoloxía
Acertos
0
Erros
1
Non contestadas
10
Certeza
0.0%
Media
78.6%
Gastroenteroloxía
Acertos
1
Erros
5
Non contestadas
24
Certeza
3.3%
Media
79.3%
Hematoloxía
Acertos
0
Erros
0
Non contestadas
9
Certeza
0.0%
Media
76.6%
Inmunoloxía
Acertos
0
Erros
1
Non contestadas
5
Certeza
0.0%
Media
91.4%
Medicina Legal e Bioética
Acertos
0
Erros
0
Non contestadas
11
Certeza
0.0%
Media
82.9%
Nefroloxía
Acertos
0
Erros
1
Non contestadas
9
Certeza
0.0%
Media
85.1%
Neuroloxía
Acertos
1
Erros
2
Non contestadas
10
Certeza
7.7%
Media
88.6%
Oftalmoloxía
Acertos
0
Erros
1
Non contestadas
4
Certeza
0.0%
Media
83.7%
Oncoloxía Médica
Acertos
1
Erros
3
Non contestadas
19
Certeza
4.3%
Media
83.0%
ORL
Acertos
0
Erros
0
Non contestadas
8
Certeza
0.0%
Media
84.7%
Pediatría
Acertos
1
Erros
1
Non contestadas
20
Certeza
4.5%
Media
87.6%
Planificación e Xestión Sanitaria
Acertos
0
Erros
1
Non contestadas
9
Certeza
0.0%
Media
78.4%
Pneumoloxía
Acertos
1
Erros
1
Non contestadas
14
Certeza
6.3%
Media
82.8%
Psiquiatría
Acertos
0
Erros
0
Non contestadas
8
Certeza
0.0%
Media
87.9%
Radioloxía-Urxencias
Acertos
0
Erros
2
Non contestadas
11
Certeza
0.0%
Media
67.7%
Reumatoloxía
Acertos
0
Erros
1
Non contestadas
10
Certeza
0.0%
Media
88.4%
Traumatoloxía
Acertos
0
Erros
1
Non contestadas
10
Certeza
0.0%
Media
65.2%
Uroloxía
Acertos
0
Erros
1
Non contestadas
7
Certeza
0.0%
Media
82.5%
Xenética
Acertos
0
Erros
1
Non contestadas
10
Certeza
0.0%
Media
78.7%
Xeriatría
Acertos
1
Erros
1
Non contestadas
11
Certeza
7.7%
Media
83.0%
Xinecoloxía e Obstetricia
Acertos
0
Erros
2
Non contestadas
10
Certeza
0.0%
Media
84.3%

Desglose por Tipo de Pregunta

Anatomía
Acertos
0
Erros
0
Non contestadas
3
Certeza
0.0%
Media
82.6%
Bioestatística
Acertos
0
Erros
0
Non contestadas
2
Certeza
0.0%
Media
83.8%
Diagnóstico
Acertos
1
Erros
6
Non contestadas
74
Certeza
1.2%
Media
82.2%
Epidemioloxía
Acertos
0
Erros
1
Non contestadas
8
Certeza
0.0%
Media
88.7%
Ética
Acertos
0
Erros
0
Non contestadas
6
Certeza
0.0%
Media
92.0%
Farmacoloxía
Acertos
0
Erros
2
Non contestadas
13
Certeza
0.0%
Media
82.3%
Fisiopatoloxía
Acertos
0
Erros
4
Non contestadas
22
Certeza
0.0%
Media
84.3%
Interpretación
Acertos
0
Erros
3
Non contestadas
34
Certeza
0.0%
Media
72.0%
Legal
Acertos
0
Erros
0
Non contestadas
9
Certeza
0.0%
Media
82.4%
Prevención
Acertos
0
Erros
2
Non contestadas
14
Certeza
0.0%
Media
80.6%
Probas
Acertos
1
Erros
2
Non contestadas
30
Certeza
3.0%
Media
80.3%
Prognóstico
Acertos
0
Erros
0
Non contestadas
5
Certeza
0.0%
Media
93.2%
Risco
Acertos
0
Erros
3
Non contestadas
12
Certeza
0.0%
Media
84.3%
Tratamento
Acertos
2
Erros
8
Non contestadas
62
Certeza
2.8%
Media
80.1%
#RespostaCorrectaEstado
1—A
2—B
3AD
4—D
5—B
6—C
7—B
8—D
9—D
10—A
11—B
12—A
13——Anulada
14DC
15—A
16—C
17—C
18—D
19—B
20—B
21—B
22—C
23—B
24—A
25—C
26—A
27—B
28—D
29—A
30AD
31BC
32—C
33—B
34—B
35—C
36AD
37—D
38—A
39—C
40—A
41—D
42—A
43—B
44—B
45—B
46—B
47AD
48CC
49—C
50——Anulada
51CA
52—C
53—C
54DC
55—A
56—A
57—A
58—A
59—B
60—B
61—C
62—B
63—B
64C—Anulada
65—C
66—C
67—C
68—A
69AB
70AB
71—B
72—B
73—B
74—A
75—C
76—C
77—A
78—D
79—A
80—D
81—C
82—D
83—B
84—A
85—D
86—A
87—B
88AB
89—B
90—C
91—A
92—C
93—D
94—C
95—C
96—B
97—B
98—A
99DB
100—C
101—C
102—A
103—C
104—C
105—C
106—B
107—C
108—A
109—C
110—C
111—B
112—C
113—C
114—D
115—B
116AD
117—C
118—B
119—A
120—A
121—C
122—B
123—B
124—B
125—C
126AB
127—C
128—B
129—C
130—C
131AB
132—B
133—C
134—B
135AC
136—B
137—D
138—B
139——Anulada
140—D
141—A
142——Anulada
143—A
144—D
145—C
146—C
147—B
148BC
149—B
150—B
151—B
152—C
153—C
154—D
155—B
156—A
157—D
158—B
159—C
160—A
161——Anulada
162—A
163—C
164—C
165AA
166—A
167BD
168—C
169—B
170—B
171—A
172—B
173—D
174—C
175—B
176—A
177—D
178—D
179—B
180—C
181—B
182—C
183—D
184—D
185—B
186AD
187CD
188—C
189—C
190—B
191—D
192—D
193—C
194—C
195—D
196—A
197—C
198—A
199CB
200—D
201—C
202—A
203—A
204—C
205—B
206CC
207—A
208——Anulada
209—B
210—C