MedicalBenchmark
AlfredPros: CodeLLaMa 7B Instruct Solidity provider

CodeLLaMa 7B Instruct Solidity

319

#319 de 319 modelos no ranking xeral

Rendemento acumulado en 3 exames MIR

Puntuación neta

0.00 pts

Certeza

3.5%

Correctas / Incorrectas

21 / 69

Custo total

$1.04

Rendemento Xeral

(vs. media)
Certeza

3.5%

avg: 80.6%

Puntuación neta

0.00 pts

avg: 453.30 pts

Acertos

21

avg: 483

Erros

69

avg: 90

Custo total

$1.04

avg: $9.58

Tempo promedio de resposta

30.1s

avg: 17.9s

Tokens saíntes

620K

avg: 1.3M

Tokens de razoamento

0

avg: 898K

Confianza promedia

18.6%

avg: 95.4%

Desagregación por Exame

MIR 2024
318
Correctas
11
Incorrectas
26
Certeza
5.5%
Puntuación neta
2.33
MIR 2025
319
Correctas
7
Incorrectas
22
Certeza
3.5%
Puntuación neta
0.00
MIR 2026
319
Correctas
3
Incorrectas
21
Certeza
1.5%
Puntuación neta
0.00