CodeLLaMa 7B Instruct Solidity
319
#319 de 319 modelos no ranking geral
Desempenho acumulado em 3 exames MIR
Pontuação líquida
0.00 pts
Exatidão
3.5%
Corretas / Incorretas
21 / 69
Custo total
$1.04
Desempenho Geral
(vs. média)Exatidão
3.5%
avg: 80.6%
Pontuação líquida
0.00 pts
avg: 453.30 pts
Acertos
21
avg: 483
Erros
69
avg: 90
Custo total
$1.04
avg: $9.58
Tempo médio de resposta
30.1s
avg: 17.9s
Tokens de saída
620K
avg: 1.3M
Tokens de raciocínio
0
avg: 898K
Confiança média
18.6%
avg: 95.4%
Desagregação por Exame
| Exame | Posição | Corretas | Incorretas | Exatidão | Pontuação líquida | Custo total | |
|---|---|---|---|---|---|---|---|
| MIR 2024 | 318 | 11 | 26 | 5.5% | 2.33 | $0.35 | Ver detalhe |
| MIR 2025 | 319 | 7 | 22 | 3.5% | 0.00 | $0.37 | Ver detalhe |
| MIR 2026 | 319 | 3 | 21 | 1.5% | 0.00 | $0.32 | Ver detalhe |