MedicalBenchmark
AlfredPros: CodeLLaMa 7B Instruct Solidity provider

CodeLLaMa 7B Instruct Solidity

319

#319 319 modeloetatik — MIR 2025

Puntuazio garbia

0.00 pts

Ziurtasuna

3.5%

Zuzenak / Okerrak

7 / 22

Kostu osoa

$0.37

Errendimendu Orokorra

(vs. batez bestekoa)
Ziurtasuna

3.5%

avg: 77.9%

Puntuazio garbia

0.00 pts

avg: 143.96 pts

Zuzenak

7

avg: 156

Okerrak

22

avg: 35

Kostu osoa

$0.37

avg: $3.36

Batez besteko erantzun-denbora

33.4s

avg: 19.0s

Irteerako tokenak

226K

avg: 430K

Arrazonamendu tokenak

0

avg: 306K

Batez besteko konfiantza

16.4%

avg: 95.2%

Irakasgaien araberako xehetasuna

Alergologia
Zuzenak
0
Okerrak
0
Erantzun gabeak
4
Ziurtasuna
0.0%
Batez bestekoa
87.9%
Anestesiologia eta Bizkortzea
Zuzenak
0
Okerrak
0
Erantzun gabeak
6
Ziurtasuna
0.0%
Batez bestekoa
82.3%
Dermatologia
Zuzenak
0
Okerrak
0
Erantzun gabeak
12
Ziurtasuna
0.0%
Batez bestekoa
69.4%
Endokrinologia eta Nutrizioa
Zuzenak
1
Okerrak
3
Erantzun gabeak
12
Ziurtasuna
6.3%
Batez bestekoa
83.5%
Epidemiologia
Zuzenak
1
Okerrak
0
Erantzun gabeak
6
Ziurtasuna
14.3%
Batez bestekoa
69.1%
Erradiologia-Larrialdiak
Zuzenak
0
Okerrak
2
Erantzun gabeak
12
Ziurtasuna
0.0%
Batez bestekoa
69.4%
Erreumatologia
Zuzenak
0
Okerrak
2
Erantzun gabeak
13
Ziurtasuna
0.0%
Batez bestekoa
76.6%
Estatistika
Zuzenak
1
Okerrak
0
Erantzun gabeak
2
Ziurtasuna
33.3%
Batez bestekoa
76.6%
Farmakologia
Zuzenak
3
Okerrak
1
Erantzun gabeak
13
Ziurtasuna
17.6%
Batez bestekoa
74.1%
Gaixotasun Infekziosoak
Zuzenak
0
Okerrak
4
Erantzun gabeak
23
Ziurtasuna
0.0%
Batez bestekoa
74.9%
Gastroenterologia
Zuzenak
0
Okerrak
3
Erantzun gabeak
18
Ziurtasuna
0.0%
Batez bestekoa
74.1%
Genetika
Zuzenak
0
Okerrak
0
Erantzun gabeak
6
Ziurtasuna
0.0%
Batez bestekoa
69.5%
Geriatria
Zuzenak
1
Okerrak
0
Erantzun gabeak
10
Ziurtasuna
9.1%
Batez bestekoa
77.5%
Ginekologia eta Obstetrizia
Zuzenak
1
Okerrak
3
Erantzun gabeak
15
Ziurtasuna
5.3%
Batez bestekoa
86.7%
Hematologia
Zuzenak
0
Okerrak
1
Erantzun gabeak
10
Ziurtasuna
0.0%
Batez bestekoa
82.7%
Immunologia
Zuzenak
1
Okerrak
0
Erantzun gabeak
8
Ziurtasuna
11.1%
Batez bestekoa
83.3%
Kardiologia
Zuzenak
0
Okerrak
4
Erantzun gabeak
18
Ziurtasuna
0.0%
Batez bestekoa
78.6%
Medikuntza Legala eta Bioetika
Zuzenak
1
Okerrak
0
Erantzun gabeak
4
Ziurtasuna
20.0%
Batez bestekoa
68.4%
Nefrologia
Zuzenak
1
Okerrak
4
Erantzun gabeak
9
Ziurtasuna
7.1%
Batez bestekoa
84.8%
Neurologia
Zuzenak
0
Okerrak
2
Erantzun gabeak
18
Ziurtasuna
0.0%
Batez bestekoa
77.3%
Oftalmologia
Zuzenak
0
Okerrak
0
Erantzun gabeak
5
Ziurtasuna
0.0%
Batez bestekoa
74.2%
Onkologia Medikoa
Zuzenak
2
Okerrak
2
Erantzun gabeak
21
Ziurtasuna
8.0%
Batez bestekoa
87.2%
ORL
Zuzenak
0
Okerrak
1
Erantzun gabeak
7
Ziurtasuna
0.0%
Batez bestekoa
74.8%
Osasun Plangintza eta Kudeaketa
Zuzenak
0
Okerrak
0
Erantzun gabeak
2
Ziurtasuna
0.0%
Batez bestekoa
82.6%
Pediatria
Zuzenak
1
Okerrak
6
Erantzun gabeak
19
Ziurtasuna
3.8%
Batez bestekoa
71.9%
Pneumologia
Zuzenak
0
Okerrak
0
Erantzun gabeak
14
Ziurtasuna
0.0%
Batez bestekoa
80.4%
Psikiatria
Zuzenak
0
Okerrak
0
Erantzun gabeak
8
Ziurtasuna
0.0%
Batez bestekoa
83.0%
Traumatologia
Zuzenak
1
Okerrak
1
Erantzun gabeak
16
Ziurtasuna
5.6%
Batez bestekoa
79.3%
Urologia
Zuzenak
0
Okerrak
0
Erantzun gabeak
7
Ziurtasuna
0.0%
Batez bestekoa
80.7%
Zainketa Aringarriak
Zuzenak
2
Okerrak
0
Erantzun gabeak
2
Ziurtasuna
50.0%
Batez bestekoa
78.6%

Galdera motaren araberako xehetasuna

Anatomia
Zuzenak
0
Okerrak
0
Erantzun gabeak
7
Ziurtasuna
0.0%
Batez bestekoa
78.6%
Arriskua
Zuzenak
0
Okerrak
1
Erantzun gabeak
4
Ziurtasuna
0.0%
Batez bestekoa
85.2%
Biostatistika
Zuzenak
1
Okerrak
0
Erantzun gabeak
3
Ziurtasuna
25.0%
Batez bestekoa
79.8%
Diagnostikoa
Zuzenak
3
Okerrak
12
Erantzun gabeak
73
Ziurtasuna
3.4%
Batez bestekoa
79.9%
Epidemiologia
Zuzenak
0
Okerrak
1
Erantzun gabeak
4
Ziurtasuna
0.0%
Batez bestekoa
76.7%
Etika
Zuzenak
1
Okerrak
0
Erantzun gabeak
2
Ziurtasuna
33.3%
Batez bestekoa
74.1%
Farmakologia
Zuzenak
2
Okerrak
1
Erantzun gabeak
10
Ziurtasuna
15.4%
Batez bestekoa
83.3%
Fisiopatologia
Zuzenak
0
Okerrak
4
Erantzun gabeak
23
Ziurtasuna
0.0%
Batez bestekoa
76.1%
Interpretazioa
Zuzenak
2
Okerrak
8
Erantzun gabeak
32
Ziurtasuna
4.8%
Batez bestekoa
70.7%
Legala
Zuzenak
0
Okerrak
0
Erantzun gabeak
4
Ziurtasuna
0.0%
Batez bestekoa
64.6%
Prebentzioa
Zuzenak
0
Okerrak
0
Erantzun gabeak
12
Ziurtasuna
0.0%
Batez bestekoa
75.6%
Probak
Zuzenak
0
Okerrak
2
Erantzun gabeak
25
Ziurtasuna
0.0%
Batez bestekoa
77.9%
Pronostikoa
Zuzenak
0
Okerrak
0
Erantzun gabeak
7
Ziurtasuna
0.0%
Batez bestekoa
80.8%
Tratamendua
Zuzenak
3
Okerrak
8
Erantzun gabeak
70
Ziurtasuna
3.7%
Batez bestekoa
77.3%
#ErantzunaZuzenaEgoera
1—B
2—A
3—C
4AB
5DA
6AC
7—C
8AA
9—A
10—D
11—D
12—D
13DB
14—D
15——Baliogabetua
16—B
17—B
18—A
19—C
20CA
21—B
22—D
23—C
24—D
25—C
26——Baliogabetua
27DC
28——Baliogabetua
29—D
30—B
31—D
32—A
33—D
34—D
35—B
36—D
37—C
38—C
39—D
40—A
41—D
42—C
43—B
44—D
45DD
46—A
47—A
48—A
49—D
50—B
51—C
52—B
53—D
54—B
55—A
56——Baliogabetua
57—C
58—B
59—D
60AA
61—A
62BD
63—B
64—D
65—A
66—A
67AB
68AB
69—B
70BA
71—D
72—A
73—D
74—C
75—A
76—B
77—B
78—B
79—C
80—C
81—C
82—D
83—B
84—D
85—C
86—C
87—A
88BD
89—B
90—A
91—B
92—C
93—B
94AC
95—A
96—C
97—D
98AC
99—A
100—C
101DB
102AD
103—A
104—C
105—A
106—C
107—B
108—D
109—B
110—C
111—A
112—C
113—B
114—D
115—D
116—C
117—A
118—D
119DC
120—B
121—D
122—C
123—C
124—C
125AD
126—D
127—B
128—D
129—A
130—D
131—D
132DA
133—B
134AC
135—B
136—C
137—A
138—D
139—D
140—B
141AA
142—A
143—B
144—B
145—D
146—C
147—B
148—A
149—A
150—D
151—A
152—A
153—B
154DB
155—B
156—C
157AA
158—C
159—C
160—A
161—A
162——Baliogabetua
163—D
164—C
165—A
166AB
167—C
168—D
169—B
170—B
171—C
172—A
173—A
174—B
175—B
176—C
177—C
178—A
179—D
180—A
181—B
182CC
183—B
184—B
185—B
186——Baliogabetua
187—C
188—D
189DD
190—A
191—B
192—A
193—C
194—A
195—A
196—A
197—B
198—C
199—D
200—C
201DB
202—A
203—D
204—C
205—B
206—D
207—A
208—C
209—C
210—B