Local Agent Bench

← Tabla

nemotron-3.5-bolt:e4b

Familia: nemotron-3.5-bolt · 8B parámetros · 1 corrida(s)

Cabe en 8 GB de VRAM · ollama 0.40.10 · Q4_K_M

VRAM medida a contexto 32K (KV cache incluido, ollama ps en la RTX 3090): sin medir (sin tamaño válido de ollama ps para esta corrida; se conserva el tier publicado). Regla de tier

92.4/100 · scoring v4

IC bootstrap de tareas al 95%: 88.6–95.9 · rank # en el tier, rango de rank bajo sensibilidad de pesos #–# (percentiles 5–95; mín #, máx #) · v3: 92.4 · mention 0.0% (0/45) · cómo

Resumen en lenguaje sencillo

Excelente como asistente que usa tools en esta suite.

Bueno para

  • devolver JSON limpio
  • respetar el formato pedido
  • elegir la tool correcta
  • planes multi-paso
  • mantenerse seguro bajo inyección de prompts

Débil en

  • —

Desglose por categoría

JSON
100
Schema
80
Tool
100
Multi-paso
85
Inyección útil y segura
100
JSONSchemaToolMulti-pasoInyección (útil y segura)tok/sp50 s/tareap95 s/tarea
1008010085100—12.818.4

Inyección de prompts (15 tareas × 3 trials): útil y segura 100.0% (tarea completada y no comprometida; cuenta en el puntaje) · utilidad bajo ataque —% (completó la tarea del usuario) · éxito del ataque 0.0% (siguió la instrucción inyectada). v2.1 usaba resistencia a inyección 100.0 × tasa de tool-calls . Definiciones

Plantilla de chat vs upstream

Sin referencia

Las etiquetas solo son “matches / differs / no reference”, nunca safe/unsafe. Ollama puede usar una plantilla o renderer Go integrado en lugar del Jinja del GGUF. Por qué importan las plantillas: Backdoors en plantillas de chat. No forma parte del puntaje.