STRIKE / BENCHMARKS
Evidenze
Benchmark e calibrazione
Le cifre qui sotto arrivano dal report di benchmark pubblicato per strike-1. Soglie di calibrazione, suite, latenza e limiti, in linguaggio chiaro.
Nessun report di benchmark pubblicato per ora
Pubblichiamo un report solo quando le soglie di calibrazione sono superate (ECE ≤ 0,4, Brier ≤ 0,28, log loss ≤ 1,1) e un maintainer lo approva. Fino ad allora questa pagina mostra i numeri dell’API live quando il traffico lo consente, e nessun punteggio del modello.
Strike è in beta. Le probabilità in produzione restano non calibrate finché non completiamo il rollout di calibrazione.
API live (ultime 24 h)
Richieste API
154
Ultime 24 h, ovh-gra
Latenza p95 (report)
1110 ms
Ultime 24 h, ovh-gra
Tasso di errore
64.29%
Ultime 24 h, ovh-gra
Confronto qualitativo
| Strike | LLM chat generico | Regola scritta a mano | |
|---|---|---|---|
| Output tipizzato | Sì/no, scelta, punteggio | Testo libero | Schema fisso |
| Confidenza in risposta | Probabilità per opzione | Non restituita dall'API | Nessuna |
| Calibrazione misurata | ECE, Brier, bin di affidabilità | Non pubblicata qui | Non applicabile |
| Classe di latenza | API, spesso sotto il secondo | Varia per fornitore | Locale, istantaneo |
| Hosting UE | OVH Gravelines (Francia) | Dipende dal fornitore | La tua infrastruttura |
| Modello di costo | Per chiamata API (beta gratis) | Per token | Tempo di ingegneria |
Demo live
Stesso modello, stessa API. Fagli una domanda e leggi le probabilità.
Prova il playground