STRIKE / BENCHMARKS
Evidencia
Benchmarks y calibración
Las cifras de abajo salen del informe de benchmark publicado para strike-1. Umbrales de calibración, suites, latencia y límites, en lenguaje claro.
Aún no hay un informe de benchmark publicado
Publicamos un informe solo cuando se cumplen los umbrales de calibración (ECE ≤ 0,4, Brier ≤ 0,28, log loss ≤ 1,1) y una persona del equipo lo aprueba. Hasta entonces esta página muestra cifras de la API en vivo cuando hay tráfico, y ninguna puntuación del modelo.
Strike está en beta. Las probabilidades en producción siguen sin calibrar hasta terminar el despliegue de calibración.
API en vivo (últimas 24 h)
Peticiones API
154
Últimas 24 h, ovh-gra
Latencia p95 (informe)
1110 ms
Últimas 24 h, ovh-gra
Tasa de error
64.29%
Últimas 24 h, ovh-gra
Comparación cualitativa
| Strike | LLM de chat genérico | Regla escrita a mano | |
|---|---|---|---|
| Salida tipada | Sí/no, opción, puntuación | Texto libre | Esquema fijo |
| Confianza en la respuesta | Probabilidades por opción | No devuelta por la API | Ninguna |
| Calibración medida | ECE, Brier, bins de fiabilidad | No publicada aquí | No aplica |
| Clase de latencia | API, a menudo subsegundo | Depende del proveedor | Local, instantáneo |
| Alojamiento UE | OVH Gravelines (Francia) | Depende del proveedor | Tu infraestructura |
| Modelo de coste | Por llamada API (beta gratis) | Por token | Tiempo de ingeniería |
Demo en vivo
Mismo modelo, misma API. Pregúntale algo y lee las probabilidades.
Probar el playground