STRIKE / BENCHMARKS
Preuves
Benchmarks et calibration
Les chiffres ci-dessous viennent du rapport de benchmark publié pour strike-1. Seuils, suites, latence et limites, sans jargon inutile.
Aucun rapport de benchmark publié pour l’instant
Nous publions un rapport seulement quand les seuils de calibration sont atteints (ECE ≤ 0,4, Brier ≤ 0,28, log loss ≤ 1,1) et qu’un mainteneur le valide. D’ici là, cette page affiche les chiffres de l’API en direct quand le trafic le permet, et aucun score de modèle.
Strike est en bêta. Les probabilités en production restent non calibrées tant que le déploiement de calibration n’est pas terminé.
API en direct (dernières 24 h)
Requêtes API
154
Dernières 24 h, ovh-gra
Latence p95 (rapport)
1110 ms
Dernières 24 h, ovh-gra
Taux d’erreur
64.29%
Dernières 24 h, ovh-gra
Comparaison qualitative
| Strike | LLM chat générique | Règle écrite à la main | |
|---|---|---|---|
| Sortie typée | Oui/non, choix, score | Texte libre | Schéma fixe |
| Confiance renvoyée | Probabilités par option | Non renvoyée par l'API | Aucune |
| Calibration mesurée | ECE, Brier, bins de fiabilité | Non publiée ici | Sans objet |
| Classe de latence | API, souvent sous la seconde | Variable selon le fournisseur | Local, instantané |
| Hébergement UE | OVH Gravelines (France) | Selon l’éditeur | Votre infra |
| Modèle de coût | Par appel API (bêta gratuite) | Par token | Temps d’ingénierie |
Démo en direct
Même modèle, même API. Posez-lui une question et lisez les probabilités.
Essayer le playground