MedicalBenchmark
AlfredPros: CodeLLaMa 7B Instruct Solidity provider

CodeLLaMa 7B Instruct Solidity

319

#319 de 319 models al ranking general

Rendiment acumulat en 3 exàmens MIR

Puntuació neta

0.00 pts

Certesa

3.5%

Correctes / Incorrectes

21 / 69

Cost total

$1.04

Rendiment General

(vs. mitjana)
Certesa

3.5%

avg: 80.6%

Puntuació neta

0.00 pts

avg: 453.30 pts

Encerts

21

avg: 483

Errors

69

avg: 90

Cost total

$1.04

avg: $9.58

Temps mitjà de resposta

30.1s

avg: 17.9s

Tokens eixints

620K

avg: 1.3M

Tokens de raonament

0

avg: 898K

Confiança mitjana

18.6%

avg: 95.4%

Desglossament per Examen

MIR 2024
318
Correctes
11
Incorrectes
26
Certesa
5.5%
Puntuació neta
2.33
MIR 2025
319
Correctes
7
Incorrectes
22
Certesa
3.5%
Puntuació neta
0.00
MIR 2026
319
Correctes
3
Incorrectes
21
Certesa
1.5%
Puntuació neta
0.00