STRIKE / BENCHMARKS
Belege
Benchmarks und Kalibrierung
Die Zahlen unten stammen aus dem veröffentlichten Benchmark-Report für strike-1. Kalibrierungskriterien, Suiten, Latenz und Grenzen in klarer Sprache.
Noch kein Benchmark-Report veröffentlicht
Wir veröffentlichen einen Report erst, wenn die Kalibrierungskriterien bestanden sind (ECE ≤ 0,4, Brier ≤ 0,28, Log Loss ≤ 1,1) und ein Maintainer ihn freigibt. Bis dahin zeigt diese Seite Live-Zahlen der API, sobald genug Traffic da ist, und keine Modellwerte.
Strike ist in der Beta. Wahrscheinlichkeiten in Produktion sind unkalibriert, bis der Kalibrierungs-Rollout fertig ist.
Live-API (letzte 24 h)
API-Anfragen
154
Letzte 24 h, ovh-gra
p95-Latenz (Report)
1110 ms
Letzte 24 h, ovh-gra
Fehlerrate
64.29%
Letzte 24 h, ovh-gra
Qualitativer Vergleich
| Strike | Generisches Chat-LLM | Handgeschriebene Regel | |
|---|---|---|---|
| Typisierte Ausgabe | Ja/Nein, Auswahl, Score | Freitext | Festes Schema |
| Konfidenz in der Antwort | Wahrscheinlichkeiten pro Option | Von der API nicht zurückgegeben | Keine |
| Kalibrierung gemessen | ECE, Brier, Reliability-Bins | Hier nicht veröffentlicht | Entfällt |
| Latenzklasse | API, oft unter einer Sekunde | Hängt vom Anbieter ab | Lokal, sofort |
| EU-Hosting | OVH Gravelines (Frankreich) | Je nach Anbieter | Deine Infrastruktur |
| Kostenmodell | Pro API-Call (Beta gratis) | Pro Token | Engineering-Zeit |
Live-Demo
Gleiches Modell, gleiche API. Stell eine Frage und lies die Wahrscheinlichkeiten ab.
Playground ausprobieren