MedicalBenchmark
AlfredPros: CodeLLaMa 7B Instruct Solidity provider

CodeLLaMa 7B Instruct Solidity

319

#319 de 319 modelos — MIR 2026

Puntuación neta

0.00 pts

Certeza

1.5%

Correctas / Incorrectas

3 / 21

Custo total

$0.32

Rendemento Xeral

(vs. media)
Certeza

1.5%

avg: 82.4%

Puntuación neta

0.00 pts

avg: 156.14 pts

Acertos

3

avg: 165

Erros

21

avg: 26

Custo total

$0.32

avg: $3.12

Tempo promedio de resposta

27.9s

avg: 17.4s

Tokens saíntes

185K

avg: 415K

Tokens de razoamento

0

avg: 295K

Confianza promedia

16.9%

avg: 95.4%

Desglose por Materia

Alerxoloxía
Acertos
0
Erros
0
Non contestadas
1
Certeza
0.0%
Media
96.9%
Anestesioloxía e Reanimación
Acertos
0
Erros
2
Non contestadas
5
Certeza
0.0%
Media
71.0%
Cardioloxía
Acertos
0
Erros
2
Non contestadas
23
Certeza
0.0%
Media
78.4%
Coidados Paliativos
Acertos
0
Erros
0
Non contestadas
6
Certeza
0.0%
Media
80.8%
Dermatoloxía
Acertos
0
Erros
1
Non contestadas
10
Certeza
0.0%
Media
73.2%
Endocrinoloxía e Nutrición
Acertos
0
Erros
3
Non contestadas
12
Certeza
0.0%
Media
84.7%
Enfermidades Infecciosas
Acertos
0
Erros
3
Non contestadas
11
Certeza
0.0%
Media
79.0%
Epidemioloxía
Acertos
0
Erros
2
Non contestadas
5
Certeza
0.0%
Media
81.3%
Estatística
Acertos
0
Erros
0
Non contestadas
2
Certeza
0.0%
Media
84.5%
Farmacoloxía
Acertos
0
Erros
1
Non contestadas
10
Certeza
0.0%
Media
79.6%
Gastroenteroloxía
Acertos
1
Erros
5
Non contestadas
24
Certeza
3.3%
Media
80.2%
Hematoloxía
Acertos
0
Erros
0
Non contestadas
9
Certeza
0.0%
Media
77.6%
Inmunoloxía
Acertos
0
Erros
1
Non contestadas
5
Certeza
0.0%
Media
91.8%
Medicina Legal e Bioética
Acertos
0
Erros
0
Non contestadas
11
Certeza
0.0%
Media
83.4%
Nefroloxía
Acertos
0
Erros
1
Non contestadas
9
Certeza
0.0%
Media
85.6%
Neuroloxía
Acertos
1
Erros
2
Non contestadas
10
Certeza
7.7%
Media
89.0%
Oftalmoloxía
Acertos
0
Erros
1
Non contestadas
4
Certeza
0.0%
Media
84.5%
Oncoloxía Médica
Acertos
1
Erros
3
Non contestadas
19
Certeza
4.3%
Media
83.7%
ORL
Acertos
0
Erros
0
Non contestadas
8
Certeza
0.0%
Media
85.0%
Pediatría
Acertos
1
Erros
1
Non contestadas
20
Certeza
4.5%
Media
88.1%
Planificación e Xestión Sanitaria
Acertos
0
Erros
1
Non contestadas
9
Certeza
0.0%
Media
79.4%
Pneumoloxía
Acertos
1
Erros
1
Non contestadas
14
Certeza
6.3%
Media
83.6%
Psiquiatría
Acertos
0
Erros
0
Non contestadas
8
Certeza
0.0%
Media
88.4%
Radioloxía-Urxencias
Acertos
0
Erros
2
Non contestadas
11
Certeza
0.0%
Media
69.4%
Reumatoloxía
Acertos
0
Erros
1
Non contestadas
10
Certeza
0.0%
Media
89.0%
Traumatoloxía
Acertos
0
Erros
1
Non contestadas
10
Certeza
0.0%
Media
66.6%
Uroloxía
Acertos
0
Erros
1
Non contestadas
7
Certeza
0.0%
Media
83.1%
Xenética
Acertos
0
Erros
1
Non contestadas
10
Certeza
0.0%
Media
79.7%
Xeriatría
Acertos
1
Erros
1
Non contestadas
11
Certeza
7.7%
Media
83.7%
Xinecoloxía e Obstetricia
Acertos
0
Erros
2
Non contestadas
10
Certeza
0.0%
Media
85.2%

Desglose por Tipo de Pregunta

Anatomía
Acertos
0
Erros
0
Non contestadas
3
Certeza
0.0%
Media
83.4%
Bioestatística
Acertos
0
Erros
0
Non contestadas
2
Certeza
0.0%
Media
84.5%
Diagnóstico
Acertos
1
Erros
6
Non contestadas
74
Certeza
1.2%
Media
83.0%
Epidemioloxía
Acertos
0
Erros
1
Non contestadas
8
Certeza
0.0%
Media
89.1%
Ética
Acertos
0
Erros
0
Non contestadas
6
Certeza
0.0%
Media
92.2%
Farmacoloxía
Acertos
0
Erros
2
Non contestadas
13
Certeza
0.0%
Media
83.1%
Fisiopatoloxía
Acertos
0
Erros
4
Non contestadas
22
Certeza
0.0%
Media
85.0%
Interpretación
Acertos
0
Erros
3
Non contestadas
34
Certeza
0.0%
Media
73.2%
Legal
Acertos
0
Erros
0
Non contestadas
9
Certeza
0.0%
Media
82.9%
Prevención
Acertos
0
Erros
2
Non contestadas
14
Certeza
0.0%
Media
81.5%
Probas
Acertos
1
Erros
2
Non contestadas
30
Certeza
3.0%
Media
81.2%
Prognóstico
Acertos
0
Erros
0
Non contestadas
5
Certeza
0.0%
Media
93.2%
Risco
Acertos
0
Erros
3
Non contestadas
12
Certeza
0.0%
Media
85.0%
Tratamento
Acertos
2
Erros
8
Non contestadas
62
Certeza
2.8%
Media
80.9%
#RespostaCorrectaEstado
1—A
2—B
3AD
4—D
5—B
6—C
7—B
8—D
9—D
10—A
11—B
12—A
13——Anulada
14DC
15—A
16—C
17—C
18—D
19—B
20—B
21—B
22—C
23—B
24—A
25—C
26—A
27—B
28—D
29—A
30AD
31BC
32—C
33—B
34—B
35—C
36AD
37—D
38—A
39—C
40—A
41—D
42—A
43—B
44—B
45—B
46—B
47AD
48CC
49—C
50——Anulada
51CA
52—C
53—C
54DC
55—A
56—A
57—A
58—A
59—B
60—B
61—C
62—B
63—B
64C—Anulada
65—C
66—C
67—C
68—A
69AB
70AB
71—B
72—B
73—B
74—A
75—C
76—C
77—A
78—D
79—A
80—D
81—C
82—D
83—B
84—A
85—D
86—A
87—B
88AB
89—B
90—C
91—A
92—C
93—D
94—C
95—C
96—B
97—B
98—A
99DB
100—C
101—C
102—A
103—C
104—C
105—C
106—B
107—C
108—A
109—C
110—C
111—B
112—C
113—C
114—D
115—B
116AD
117—C
118—B
119—A
120—A
121—C
122—B
123—B
124—B
125—C
126AB
127—C
128—B
129—C
130—C
131AB
132—B
133—C
134—B
135AC
136—B
137—D
138—B
139——Anulada
140—D
141—A
142——Anulada
143—A
144—D
145—C
146—C
147—B
148BC
149—B
150—B
151—B
152—C
153—C
154—D
155—B
156—A
157—D
158—B
159—C
160—A
161——Anulada
162—A
163—C
164—C
165AA
166—A
167BD
168—C
169—B
170—B
171—A
172—B
173—D
174—C
175—B
176—A
177—D
178—D
179—B
180—C
181—B
182—C
183—D
184—D
185—B
186AD
187CD
188—C
189—C
190—B
191—D
192—D
193—C
194—C
195—D
196—A
197—C
198—A
199CB
200—D
201—C
202—A
203—A
204—C
205—B
206CC
207—A
208——Anulada
209—B
210—C