El resultado del 100 % de AVO de NVIDIA en ARC-AGI-3 mide un arnés, no un modelo
AVO de NVIDIA superó el conjunto público de ARC-AGI-3, pero el benchmark no aísla la contribución del arnés ni prueba la generalización en tareas privadas.
Etiqueta
#agent-harnesses
2artículoscon esta etiqueta.
HarnessRisk muestra por qué una sola demostración de inyección de prompts no puede medir la seguridad de un agente
HarnessRisk informa de amplias diferencias de seguridad entre combinaciones de modelos y harnesses de agentes, y encuentra que la configuración es más vulnerable que las demás fases del ciclo de vida que probó.