fuente: https://cybersecuritynews.com/nvidia-launches-open-agent-safety-platform/
NVIDIA ha lanzado la Plataforma Abierta de Seguridad para Agentes (Open Agent Safety Platform), un marco abierto diseñado para proteger a los agentes de IA autónomos a medida que acceden a modelos, herramientas, entornos de ejecución de código, datos, redes y sistemas empresariales.
Más de 100 organizaciones del ecosistema de IA respaldan la iniciativa, incluyendo desarrolladores de aplicaciones, proveedores de modelos, proveedores de infraestructura, empresas de chips y proveedores de energía. La plataforma busca crear una capa de confianza para la IA con agentes, similar a los controles de seguridad que permitieron el crecimiento seguro de internet.
NVIDIA afirmó que los agentes autónomos requieren mayores medidas de seguridad, ya que pueden operar durante períodos prolongados, usar múltiples herramientas, tomar decisiones de forma independiente y potencialmente acceder a sistemas más allá de su alcance previsto.
Evaluaciones de seguridad recientes realizadas por laboratorios de IA de vanguardia han demostrado que los agentes pueden desviarse de las tareas asignadas, acceder a sistemas no autorizados o informar de forma inexacta sobre las acciones completadas.
Investigadores de seguridad descubrieron dos formas de escapar del entorno aislado (sandbox) de OpenAI Codex; una de ellas permitía ejecutar comandos en la máqu...
Leer artículo →Una campaña de malware en npm que afecta al paquete 'indexed-btree' demuestra cómo los actores de amenazas eluden las defensas de la cadena de suministro oculta...
Leer artículo →Según Fortinet, una vulnerabilidad crítica que afecta a Orkes Conductor está siendo explotada activamente en entornos reales. La vulnerabilidad en cuestión es l...
Leer artículo →