MedicalBenchmark
AlfredPros: CodeLLaMa 7B Instruct Solidity provider

CodeLLaMa 7B Instruct Solidity

319

#319 de 319 models — MIR 2025

Puntuació neta

0.00 pts

Certesa

3.5%

Correctes / Incorrectes

7 / 22

Cost total

$0.37

Rendiment General

(vs. mitjana)
Certesa

3.5%

avg: 77.9%

Puntuació neta

0.00 pts

avg: 143.96 pts

Encerts

7

avg: 156

Errors

22

avg: 35

Cost total

$0.37

avg: $3.36

Temps mitjà de resposta

33.4s

avg: 19.0s

Tokens sortints

226K

avg: 430K

Tokens de raonament

0

avg: 306K

Confiança mitjana

16.4%

avg: 95.2%

Desglossament per Assignatura

Al·lergologia
Encerts
0
Errors
0
No contestades
4
Certesa
0.0%
Mitjana
87.9%
Anestesiologia i Reanimació
Encerts
0
Errors
0
No contestades
6
Certesa
0.0%
Mitjana
82.3%
Cardiologia
Encerts
0
Errors
4
No contestades
18
Certesa
0.0%
Mitjana
78.6%
Cures Pal·liatives
Encerts
2
Errors
0
No contestades
2
Certesa
50.0%
Mitjana
78.6%
Dermatologia
Encerts
0
Errors
0
No contestades
12
Certesa
0.0%
Mitjana
69.4%
Endocrinologia i Nutrició
Encerts
1
Errors
3
No contestades
12
Certesa
6.3%
Mitjana
83.5%
Epidemiologia
Encerts
1
Errors
0
No contestades
6
Certesa
14.3%
Mitjana
69.1%
Estadística
Encerts
1
Errors
0
No contestades
2
Certesa
33.3%
Mitjana
76.6%
Farmacologia
Encerts
3
Errors
1
No contestades
13
Certesa
17.6%
Mitjana
74.1%
Gastroenterologia
Encerts
0
Errors
3
No contestades
18
Certesa
0.0%
Mitjana
74.1%
Genètica
Encerts
0
Errors
0
No contestades
6
Certesa
0.0%
Mitjana
69.5%
Geriatria
Encerts
1
Errors
0
No contestades
10
Certesa
9.1%
Mitjana
77.5%
Ginecologia i Obstetrícia
Encerts
1
Errors
3
No contestades
15
Certesa
5.3%
Mitjana
86.7%
Hematologia
Encerts
0
Errors
1
No contestades
10
Certesa
0.0%
Mitjana
82.7%
Immunologia
Encerts
1
Errors
0
No contestades
8
Certesa
11.1%
Mitjana
83.3%
Malalties Infeccioses
Encerts
0
Errors
4
No contestades
23
Certesa
0.0%
Mitjana
74.9%
Medicina Legal i Bioètica
Encerts
1
Errors
0
No contestades
4
Certesa
20.0%
Mitjana
68.4%
Nefrologia
Encerts
1
Errors
4
No contestades
9
Certesa
7.1%
Mitjana
84.8%
Neurologia
Encerts
0
Errors
2
No contestades
18
Certesa
0.0%
Mitjana
77.3%
Oftalmologia
Encerts
0
Errors
0
No contestades
5
Certesa
0.0%
Mitjana
74.2%
Oncologia Mèdica
Encerts
2
Errors
2
No contestades
21
Certesa
8.0%
Mitjana
87.2%
ORL
Encerts
0
Errors
1
No contestades
7
Certesa
0.0%
Mitjana
74.8%
Pediatria
Encerts
1
Errors
6
No contestades
19
Certesa
3.8%
Mitjana
71.9%
Planificació i Gestió Sanitària
Encerts
0
Errors
0
No contestades
2
Certesa
0.0%
Mitjana
82.6%
Pneumologia
Encerts
0
Errors
0
No contestades
14
Certesa
0.0%
Mitjana
80.4%
Psiquiatria
Encerts
0
Errors
0
No contestades
8
Certesa
0.0%
Mitjana
83.0%
Radiologia-Urgències
Encerts
0
Errors
2
No contestades
12
Certesa
0.0%
Mitjana
69.4%
Reumatologia
Encerts
0
Errors
2
No contestades
13
Certesa
0.0%
Mitjana
76.6%
Traumatologia
Encerts
1
Errors
1
No contestades
16
Certesa
5.6%
Mitjana
79.3%
Urologia
Encerts
0
Errors
0
No contestades
7
Certesa
0.0%
Mitjana
80.7%

Desglossament per Tipus de Pregunta

Anatomia
Encerts
0
Errors
0
No contestades
7
Certesa
0.0%
Mitjana
78.6%
Bioestadística
Encerts
1
Errors
0
No contestades
3
Certesa
25.0%
Mitjana
79.8%
Diagnòstic
Encerts
3
Errors
12
No contestades
73
Certesa
3.4%
Mitjana
79.9%
Epidemiologia
Encerts
0
Errors
1
No contestades
4
Certesa
0.0%
Mitjana
76.7%
Ètica
Encerts
1
Errors
0
No contestades
2
Certesa
33.3%
Mitjana
74.1%
Farmacologia
Encerts
2
Errors
1
No contestades
10
Certesa
15.4%
Mitjana
83.3%
Fisiopatologia
Encerts
0
Errors
4
No contestades
23
Certesa
0.0%
Mitjana
76.1%
Interpretació
Encerts
2
Errors
8
No contestades
32
Certesa
4.8%
Mitjana
70.7%
Legal
Encerts
0
Errors
0
No contestades
4
Certesa
0.0%
Mitjana
64.6%
Prevenció
Encerts
0
Errors
0
No contestades
12
Certesa
0.0%
Mitjana
75.6%
Pronòstic
Encerts
0
Errors
0
No contestades
7
Certesa
0.0%
Mitjana
80.8%
Proves
Encerts
0
Errors
2
No contestades
25
Certesa
0.0%
Mitjana
77.9%
Risc
Encerts
0
Errors
1
No contestades
4
Certesa
0.0%
Mitjana
85.2%
Tractament
Encerts
3
Errors
8
No contestades
70
Certesa
3.7%
Mitjana
77.3%
#RespostaCorrectaEstat
1—B
2—A
3—C
4AB
5DA
6AC
7—C
8AA
9—A
10—D
11—D
12—D
13DB
14—D
15——Anul·lada
16—B
17—B
18—A
19—C
20CA
21—B
22—D
23—C
24—D
25—C
26——Anul·lada
27DC
28——Anul·lada
29—D
30—B
31—D
32—A
33—D
34—D
35—B
36—D
37—C
38—C
39—D
40—A
41—D
42—C
43—B
44—D
45DD
46—A
47—A
48—A
49—D
50—B
51—C
52—B
53—D
54—B
55—A
56——Anul·lada
57—C
58—B
59—D
60AA
61—A
62BD
63—B
64—D
65—A
66—A
67AB
68AB
69—B
70BA
71—D
72—A
73—D
74—C
75—A
76—B
77—B
78—B
79—C
80—C
81—C
82—D
83—B
84—D
85—C
86—C
87—A
88BD
89—B
90—A
91—B
92—C
93—B
94AC
95—A
96—C
97—D
98AC
99—A
100—C
101DB
102AD
103—A
104—C
105—A
106—C
107—B
108—D
109—B
110—C
111—A
112—C
113—B
114—D
115—D
116—C
117—A
118—D
119DC
120—B
121—D
122—C
123—C
124—C
125AD
126—D
127—B
128—D
129—A
130—D
131—D
132DA
133—B
134AC
135—B
136—C
137—A
138—D
139—D
140—B
141AA
142—A
143—B
144—B
145—D
146—C
147—B
148—A
149—A
150—D
151—A
152—A
153—B
154DB
155—B
156—C
157AA
158—C
159—C
160—A
161—A
162——Anul·lada
163—D
164—C
165—A
166AB
167—C
168—D
169—B
170—B
171—C
172—A
173—A
174—B
175—B
176—C
177—C
178—A
179—D
180—A
181—B
182CC
183—B
184—B
185—B
186——Anul·lada
187—C
188—D
189DD
190—A
191—B
192—A
193—C
194—A
195—A
196—A
197—B
198—C
199—D
200—C
201DB
202—A
203—D
204—C
205—B
206—D
207—A
208—C
209—C
210—B