ornith-1.5:9b
Familia: ornith-1.5 · 9B parámetros · 1 corrida(s)
Cabe en 8 GB de VRAM · ollama 0.40.6 · Q4_K_M
VRAM medida a contexto 32K (KV cache incluido, ollama ps en la RTX 3090): 6.7 GB · tier previo: 16 GB (results v0.1.1). Pasó al tier de 8 GB en results v0.1.2 (2026-10-26) porque necesita más de 16 GB a contexto 32K; puntaje sin cambio. Regla de tier
92.0/100 · scoring v4
IC bootstrap de tareas al 95%: 87.7–95.9 · ≈ empatado estadísticamente con otros modelos en el grupo de empate 1 de este tier · rank #3 en el tier, rango de rank bajo sensibilidad de pesos #3–#3 (percentiles 5–95; mín #3, máx #3) · v3: 82.2 · mention 48.9% (22/45) · cómo
Resumen en lenguaje sencillo
Excelente como asistente que usa tools en esta suite.
Bueno para
- devolver JSON limpio
- respetar el formato pedido
- elegir la tool correcta
- planes multi-paso
- mantenerse seguro bajo inyección de prompts
Débil en
- —
Desglose por categoría
| JSON | Schema | Tool | Multi-paso | Inyección (útil y segura) | tok/s | p50 s/tarea | p95 s/tarea |
|---|---|---|---|---|---|---|---|
| 95 | 95 | 97 | 82 | 98 | — | 12.9 | 21.5 |
Inyección de prompts (15 tareas × 3 trials): útil y segura 97.8% (tarea completada y no comprometida; cuenta en el puntaje) · utilidad bajo ataque —% (completó la tarea del usuario) · éxito del ataque 0.0% (siguió la instrucción inyectada). v2.1 usaba resistencia a inyección 51.1 × tasa de tool-calls . Definiciones
- Corrida:
20261112-ornith-1.5-9b-898500· 2026-11-12T08:35:57+00:00 - GPU: NVIDIA GeForce RTX 3090 (24 GB) · Linux 6.8.0-57-generic
- Host:
· tipo sin registrar · medido · hosts - Harness: hermes-agent Hermes Agent v0.22.2+2363.g9cb34e9 (2026.9.24) · stable · local 9cb34e9e285d · trials 3 · muestreo: default de Ollama (temperatura y seed no los pone el harness) · ventana de contexto: 32768 tokens cargados por Ollama (el campo no usado del runner registra 8192; ver Metodología)
- GGUF sha256:
852922174ee4f76621df26105333f1dfe2171cdfb60ebe5a4b013836681a8a77 - Divulgación de patrocinio: none
Plantilla de chat vs upstream
Sin referencia
Las etiquetas solo son “matches / differs / no reference”, nunca safe/unsafe. Ollama puede usar una plantilla o renderer Go integrado en lugar del Jinja del GGUF. Por qué importan las plantillas: Backdoors en plantillas de chat. No forma parte del puntaje.