MedicalBenchmark
AlfredPros: CodeLLaMa 7B Instruct Solidity provider

CodeLLaMa 7B Instruct Solidity

319

#319 de 319 modelos en el ranking general

Rendimiento acumulado en 3 exámenes MIR

Puntuación neta

0.00 pts

Certeza

3.5%

Correctas / Incorrectas

21 / 69

Coste total

$1.04

Rendimiento General

(vs. media)
Certeza

3.5%

avg: 80.6%

Puntuación neta

0.00 pts

avg: 453.30 pts

Aciertos

21

avg: 483

Fallos

69

avg: 90

Coste total

$1.04

avg: $9.58

Tiempo promedio de respuesta

30.1s

avg: 17.9s

Tokens salientes

620K

avg: 1.3M

Tokens de razonamiento

0

avg: 898K

Confianza promedio

18.6%

avg: 95.4%

Desglose por Examen

MIR 2024
318
Correctas
11
Incorrectas
26
Certeza
5.5%
Puntuación neta
2.33
MIR 2025
319
Correctas
7
Incorrectas
22
Certeza
3.5%
Puntuación neta
0.00
MIR 2026
319
Correctas
3
Incorrectas
21
Certeza
1.5%
Puntuación neta
0.00