MedicalBenchmark
AlfredPros: CodeLLaMa 7B Instruct Solidity provider

CodeLLaMa 7B Instruct Solidity

290

#290 de 290 models — MIR 2025

Puntuació neta

0.00 pts

Certesa

3.0%

Correctes / Incorrectes

6 / 21

Cost total

$0.36

Rendiment General

(vs. mitjana)
Certesa

3.0%

avg: 75.9%

Puntuació neta

0.00 pts

avg: 138.99 pts

Encerts

6

avg: 152

Errors

21

avg: 38

Cost total

$0.36

avg: $3.59

Temps mitjà de resposta

31.9s

avg: 18.1s

Tokens sortints

215K

avg: 443K

Tokens de raonament

0

avg: 320K

Confiança mitjana

17.8%

avg: 94.7%

Desglossament per Assignatura

Al·lergologia
Encerts
0
Errors
0
No contestades
4
Certesa
0.0%
Mitjana
86.9%
Anestesiologia i Reanimació
Encerts
0
Errors
0
No contestades
6
Certesa
0.0%
Mitjana
81.3%
Cardiologia
Encerts
0
Errors
4
No contestades
18
Certesa
0.0%
Mitjana
77.4%
Cures Pal·liatives
Encerts
2
Errors
0
No contestades
2
Certesa
50.0%
Mitjana
77.2%
Dermatologia
Encerts
0
Errors
0
No contestades
13
Certesa
0.0%
Mitjana
62.8%
Endocrinologia i Nutrició
Encerts
0
Errors
3
No contestades
13
Certesa
0.0%
Mitjana
82.5%
Epidemiologia
Encerts
1
Errors
0
No contestades
6
Certesa
14.3%
Mitjana
67.1%
Estadística
Encerts
1
Errors
0
No contestades
2
Certesa
33.3%
Mitjana
74.9%
Farmacologia
Encerts
2
Errors
1
No contestades
14
Certesa
11.8%
Mitjana
73.1%
Gastroenterologia
Encerts
0
Errors
2
No contestades
19
Certesa
0.0%
Mitjana
72.9%
Genètica
Encerts
0
Errors
0
No contestades
6
Certesa
0.0%
Mitjana
68.2%
Geriatria
Encerts
1
Errors
0
No contestades
10
Certesa
9.1%
Mitjana
71.2%
Ginecologia i Obstetrícia
Encerts
1
Errors
3
No contestades
15
Certesa
5.3%
Mitjana
85.9%
Hematologia
Encerts
0
Errors
1
No contestades
10
Certesa
0.0%
Mitjana
81.8%
Immunologia
Encerts
1
Errors
0
No contestades
8
Certesa
11.1%
Mitjana
82.5%
Malalties Infeccioses
Encerts
0
Errors
4
No contestades
24
Certesa
0.0%
Mitjana
71.1%
Medicina Legal i Bioètica
Encerts
1
Errors
0
No contestades
4
Certesa
20.0%
Mitjana
67.2%
Nefrologia
Encerts
0
Errors
4
No contestades
11
Certesa
0.0%
Mitjana
78.2%
Neurologia
Encerts
0
Errors
2
No contestades
18
Certesa
0.0%
Mitjana
76.2%
Oftalmologia
Encerts
0
Errors
0
No contestades
5
Certesa
0.0%
Mitjana
72.6%
Oncologia Mèdica
Encerts
2
Errors
2
No contestades
21
Certesa
8.0%
Mitjana
86.3%
ORL
Encerts
0
Errors
1
No contestades
7
Certesa
0.0%
Mitjana
73.8%
Pediatria
Encerts
1
Errors
6
No contestades
18
Certesa
4.0%
Mitjana
72.7%
Planificació i Gestió Sanitària
Encerts
0
Errors
0
No contestades
2
Certesa
0.0%
Mitjana
81.6%
Pneumologia
Encerts
0
Errors
0
No contestades
14
Certesa
0.0%
Mitjana
73.0%
Psiquiatria
Encerts
0
Errors
0
No contestades
8
Certesa
0.0%
Mitjana
82.0%
Radiologia-Urgències
Encerts
0
Errors
2
No contestades
12
Certesa
0.0%
Mitjana
67.9%
Reumatologia
Encerts
0
Errors
2
No contestades
12
Certesa
0.0%
Mitjana
74.6%
Traumatologia
Encerts
1
Errors
1
No contestades
16
Certesa
5.6%
Mitjana
78.2%
Urologia
Encerts
0
Errors
0
No contestades
7
Certesa
0.0%
Mitjana
79.5%

Desglossament per Tipus de Pregunta

Anatomia
Encerts
0
Errors
0
No contestades
7
Certesa
0.0%
Mitjana
77.1%
Bioestadística
Encerts
1
Errors
0
No contestades
3
Certesa
25.0%
Mitjana
78.4%
Diagnòstic
Encerts
2
Errors
11
No contestades
76
Certesa
2.2%
Mitjana
77.9%
Epidemiologia
Encerts
0
Errors
1
No contestades
4
Certesa
0.0%
Mitjana
75.0%
Ètica
Encerts
1
Errors
0
No contestades
2
Certesa
33.3%
Mitjana
72.0%
Farmacologia
Encerts
1
Errors
1
No contestades
11
Certesa
7.7%
Mitjana
82.4%
Fisiopatologia
Encerts
0
Errors
4
No contestades
23
Certesa
0.0%
Mitjana
72.6%
Interpretació
Encerts
2
Errors
8
No contestades
32
Certesa
4.8%
Mitjana
69.3%
Legal
Encerts
0
Errors
0
No contestades
4
Certesa
0.0%
Mitjana
63.6%
Prevenció
Encerts
0
Errors
0
No contestades
12
Certesa
0.0%
Mitjana
74.5%
Pronòstic
Encerts
0
Errors
0
No contestades
6
Certesa
0.0%
Mitjana
77.8%
Proves
Encerts
0
Errors
2
No contestades
24
Certesa
0.0%
Mitjana
76.3%
Risc
Encerts
0
Errors
1
No contestades
4
Certesa
0.0%
Mitjana
84.3%
Tractament
Encerts
3
Errors
8
No contestades
71
Certesa
3.7%
Mitjana
75.2%
#RespostaCorrectaEstat
1—B
2—A
3—C
4AB
5DA
6AC
7—C
8AA
9—A
10—D
11—D
12—D
13DB
14—D
15——
16—B
17—B
18—A
19—C
20CA
21—B
22—D
23—C
24—D
25—C
26——Anul·lada
27DC
28——Anul·lada
29—D
30—B
31—D
32—A
33—D
34—D
35—B
36—D
37—C
38—C
39—D
40—A
41—D
42—C
43—B
44—D
45DD
46—A
47—A
48—A
49—D
50—B
51—C
52—B
53—D
54—B
55—A
56——Anul·lada
57—C
58—B
59—D
60AA
61—A
62BD
63—B
64—D
65—A
66—A
67AB
68AB
69—B
70BA
71—D
72—A
73—D
74—C
75—A
76—B
77—B
78—B
79—C
80—C
81—C
82—D
83—B
84—D
85—C
86—C
87—A
88BD
89—B
90—A
91—B
92—C
93—B
94AC
95—A
96—C
97—D
98AC
99—A
100—C
101DB
102AD
103—A
104—C
105—A
106—C
107—B
108—D
109—B
110—C
111—A
112—C
113—B
114—D
115—D
116—C
117—A
118—D
119DC
120—B
121—D
122—C
123—C
124—C
125—D
126—D
127—B
128—D
129—A
130—D
131—D
132DA
133—B
134AC
135—B
136—C
137—A
138—D
139—D
140—B
141AA
142—A
143—B
144—B
145—D
146—C
147—B
148—A
149—A
150—A
151—A
152—A
153—B
154DB
155—B
156—C
157—A
158—C
159—C
160—A
161—A
162——
163—D
164—C
165—A
166AB
167—C
168—D
169—B
170—B
171—C
172—A
173—A
174—B
175—B
176—C
177—C
178—A
179—D
180—A
181—B
182CC
183—B
184—B
185—B
186——Anul·lada
187—C
188—D
189DD
190—A
191—B
192—A
193—C
194—A
195—A
196—A
197—B
198—C
199—D
200—C
201DB
202—A
203—D
204—C
205—B
206—D
207—A
208—C
209—C
210—B