MedicalBenchmark
AlfredPros: CodeLLaMa 7B Instruct Solidity provider

CodeLLaMa 7B Instruct Solidity

290

#290 290 modeloetatik — MIR 2025

Puntuazio garbia

0.00 pts

Ziurtasuna

3.0%

Zuzenak / Okerrak

6 / 21

Kostu osoa

$0.36

Errendimendu Orokorra

(vs. batez bestekoa)
Ziurtasuna

3.0%

avg: 75.9%

Puntuazio garbia

0.00 pts

avg: 138.99 pts

Zuzenak

6

avg: 152

Okerrak

21

avg: 38

Kostu osoa

$0.36

avg: $3.59

Batez besteko erantzun-denbora

31.9s

avg: 18.1s

Irteerako tokenak

215K

avg: 443K

Arrazonamendu tokenak

0

avg: 320K

Batez besteko konfiantza

17.8%

avg: 94.7%

Irakasgaien araberako xehetasuna

Alergologia
Zuzenak
0
Okerrak
0
Erantzun gabeak
4
Ziurtasuna
0.0%
Batez bestekoa
86.9%
Anestesiologia eta Bizkortzea
Zuzenak
0
Okerrak
0
Erantzun gabeak
6
Ziurtasuna
0.0%
Batez bestekoa
81.3%
Dermatologia
Zuzenak
0
Okerrak
0
Erantzun gabeak
13
Ziurtasuna
0.0%
Batez bestekoa
62.8%
Endokrinologia eta Nutrizioa
Zuzenak
0
Okerrak
3
Erantzun gabeak
13
Ziurtasuna
0.0%
Batez bestekoa
82.5%
Epidemiologia
Zuzenak
1
Okerrak
0
Erantzun gabeak
6
Ziurtasuna
14.3%
Batez bestekoa
67.1%
Erradiologia-Larrialdiak
Zuzenak
0
Okerrak
2
Erantzun gabeak
12
Ziurtasuna
0.0%
Batez bestekoa
67.9%
Erreumatologia
Zuzenak
0
Okerrak
2
Erantzun gabeak
12
Ziurtasuna
0.0%
Batez bestekoa
74.6%
Estatistika
Zuzenak
1
Okerrak
0
Erantzun gabeak
2
Ziurtasuna
33.3%
Batez bestekoa
74.9%
Farmakologia
Zuzenak
2
Okerrak
1
Erantzun gabeak
14
Ziurtasuna
11.8%
Batez bestekoa
73.1%
Gaixotasun Infekziosoak
Zuzenak
0
Okerrak
4
Erantzun gabeak
24
Ziurtasuna
0.0%
Batez bestekoa
71.1%
Gastroenterologia
Zuzenak
0
Okerrak
2
Erantzun gabeak
19
Ziurtasuna
0.0%
Batez bestekoa
72.9%
Genetika
Zuzenak
0
Okerrak
0
Erantzun gabeak
6
Ziurtasuna
0.0%
Batez bestekoa
68.2%
Geriatria
Zuzenak
1
Okerrak
0
Erantzun gabeak
10
Ziurtasuna
9.1%
Batez bestekoa
71.2%
Ginekologia eta Obstetrizia
Zuzenak
1
Okerrak
3
Erantzun gabeak
15
Ziurtasuna
5.3%
Batez bestekoa
85.9%
Hematologia
Zuzenak
0
Okerrak
1
Erantzun gabeak
10
Ziurtasuna
0.0%
Batez bestekoa
81.8%
Immunologia
Zuzenak
1
Okerrak
0
Erantzun gabeak
8
Ziurtasuna
11.1%
Batez bestekoa
82.5%
Kardiologia
Zuzenak
0
Okerrak
4
Erantzun gabeak
18
Ziurtasuna
0.0%
Batez bestekoa
77.4%
Medikuntza Legala eta Bioetika
Zuzenak
1
Okerrak
0
Erantzun gabeak
4
Ziurtasuna
20.0%
Batez bestekoa
67.2%
Nefrologia
Zuzenak
0
Okerrak
4
Erantzun gabeak
11
Ziurtasuna
0.0%
Batez bestekoa
78.2%
Neurologia
Zuzenak
0
Okerrak
2
Erantzun gabeak
18
Ziurtasuna
0.0%
Batez bestekoa
76.2%
Oftalmologia
Zuzenak
0
Okerrak
0
Erantzun gabeak
5
Ziurtasuna
0.0%
Batez bestekoa
72.6%
Onkologia Medikoa
Zuzenak
2
Okerrak
2
Erantzun gabeak
21
Ziurtasuna
8.0%
Batez bestekoa
86.3%
ORL
Zuzenak
0
Okerrak
1
Erantzun gabeak
7
Ziurtasuna
0.0%
Batez bestekoa
73.8%
Osasun Plangintza eta Kudeaketa
Zuzenak
0
Okerrak
0
Erantzun gabeak
2
Ziurtasuna
0.0%
Batez bestekoa
81.6%
Pediatria
Zuzenak
1
Okerrak
6
Erantzun gabeak
18
Ziurtasuna
4.0%
Batez bestekoa
72.7%
Pneumologia
Zuzenak
0
Okerrak
0
Erantzun gabeak
14
Ziurtasuna
0.0%
Batez bestekoa
73.0%
Psikiatria
Zuzenak
0
Okerrak
0
Erantzun gabeak
8
Ziurtasuna
0.0%
Batez bestekoa
82.0%
Traumatologia
Zuzenak
1
Okerrak
1
Erantzun gabeak
16
Ziurtasuna
5.6%
Batez bestekoa
78.2%
Urologia
Zuzenak
0
Okerrak
0
Erantzun gabeak
7
Ziurtasuna
0.0%
Batez bestekoa
79.5%
Zainketa Aringarriak
Zuzenak
2
Okerrak
0
Erantzun gabeak
2
Ziurtasuna
50.0%
Batez bestekoa
77.2%

Galdera motaren araberako xehetasuna

Anatomia
Zuzenak
0
Okerrak
0
Erantzun gabeak
7
Ziurtasuna
0.0%
Batez bestekoa
77.1%
Arriskua
Zuzenak
0
Okerrak
1
Erantzun gabeak
4
Ziurtasuna
0.0%
Batez bestekoa
84.3%
Biostatistika
Zuzenak
1
Okerrak
0
Erantzun gabeak
3
Ziurtasuna
25.0%
Batez bestekoa
78.4%
Diagnostikoa
Zuzenak
2
Okerrak
11
Erantzun gabeak
76
Ziurtasuna
2.2%
Batez bestekoa
77.9%
Epidemiologia
Zuzenak
0
Okerrak
1
Erantzun gabeak
4
Ziurtasuna
0.0%
Batez bestekoa
75.0%
Etika
Zuzenak
1
Okerrak
0
Erantzun gabeak
2
Ziurtasuna
33.3%
Batez bestekoa
72.0%
Farmakologia
Zuzenak
1
Okerrak
1
Erantzun gabeak
11
Ziurtasuna
7.7%
Batez bestekoa
82.4%
Fisiopatologia
Zuzenak
0
Okerrak
4
Erantzun gabeak
23
Ziurtasuna
0.0%
Batez bestekoa
72.6%
Interpretazioa
Zuzenak
2
Okerrak
8
Erantzun gabeak
32
Ziurtasuna
4.8%
Batez bestekoa
69.3%
Legala
Zuzenak
0
Okerrak
0
Erantzun gabeak
4
Ziurtasuna
0.0%
Batez bestekoa
63.6%
Prebentzioa
Zuzenak
0
Okerrak
0
Erantzun gabeak
12
Ziurtasuna
0.0%
Batez bestekoa
74.5%
Probak
Zuzenak
0
Okerrak
2
Erantzun gabeak
24
Ziurtasuna
0.0%
Batez bestekoa
76.3%
Pronostikoa
Zuzenak
0
Okerrak
0
Erantzun gabeak
6
Ziurtasuna
0.0%
Batez bestekoa
77.8%
Tratamendua
Zuzenak
3
Okerrak
8
Erantzun gabeak
71
Ziurtasuna
3.7%
Batez bestekoa
75.2%
#ErantzunaZuzenaEgoera
1—B
2—A
3—C
4AB
5DA
6AC
7—C
8AA
9—A
10—D
11—D
12—D
13DB
14—D
15——
16—B
17—B
18—A
19—C
20CA
21—B
22—D
23—C
24—D
25—C
26——Baliogabetua
27DC
28——Baliogabetua
29—D
30—B
31—D
32—A
33—D
34—D
35—B
36—D
37—C
38—C
39—D
40—A
41—D
42—C
43—B
44—D
45DD
46—A
47—A
48—A
49—D
50—B
51—C
52—B
53—D
54—B
55—A
56——Baliogabetua
57—C
58—B
59—D
60AA
61—A
62BD
63—B
64—D
65—A
66—A
67AB
68AB
69—B
70BA
71—D
72—A
73—D
74—C
75—A
76—B
77—B
78—B
79—C
80—C
81—C
82—D
83—B
84—D
85—C
86—C
87—A
88BD
89—B
90—A
91—B
92—C
93—B
94AC
95—A
96—C
97—D
98AC
99—A
100—C
101DB
102AD
103—A
104—C
105—A
106—C
107—B
108—D
109—B
110—C
111—A
112—C
113—B
114—D
115—D
116—C
117—A
118—D
119DC
120—B
121—D
122—C
123—C
124—C
125—D
126—D
127—B
128—D
129—A
130—D
131—D
132DA
133—B
134AC
135—B
136—C
137—A
138—D
139—D
140—B
141AA
142—A
143—B
144—B
145—D
146—C
147—B
148—A
149—A
150—A
151—A
152—A
153—B
154DB
155—B
156—C
157—A
158—C
159—C
160—A
161—A
162——
163—D
164—C
165—A
166AB
167—C
168—D
169—B
170—B
171—C
172—A
173—A
174—B
175—B
176—C
177—C
178—A
179—D
180—A
181—B
182CC
183—B
184—B
185—B
186——Baliogabetua
187—C
188—D
189DD
190—A
191—B
192—A
193—C
194—A
195—A
196—A
197—B
198—C
199—D
200—C
201DB
202—A
203—D
204—C
205—B
206—D
207—A
208—C
209—C
210—B