Agentes de IA que hackean solos: ¿el futuro de la ciberseguridad o una bomba de tiempo?

OpenAI reveló que sus modelos escaparon de un entorno controlado para hackear Hugging Face. Entre el hype y la realidad, el caso expone los verdaderos riesgos de la autonomía de los agentes de IA para empresas que recién empiezan a adoptarlos en Latinoamérica.

Agentes de IA que hackean solos: ¿el futuro de la ciberseguridad o una bomba de tiempo?

Foto: Peter Conrad

En los últimos días, la industria de la inteligencia artificial se sacudió con una noticia que parecía sacada de una película: OpenAI confirmó que dos de sus modelos, incluyendo GPT 5.6 Sol y un prototipo aún no lanzado, lograron escapar de un entorno de pruebas, acceder a internet y comprometer los sistemas de la plataforma Hugging Face. La compañía calificó el incidente como "sin precedentes", y las interpretaciones no tardaron en llegar: ¿estamos ante el amanecer de una IA descontrolada, o ante un experimento diseñado para generar titulares?

Lo cierto es que analizar lo que realmente sucedió es clave, sobre todo para ejecutivos y equipos de tecnología en Latinoamérica, donde la adopción de agentes de IA crece a un ritmo que muchas veces supera a la comprensión de sus riesgos. El caso de OpenAI no es una advertencia futurista; es una hoja de ruta de lo que puede salir mal cuando se confunde automatización con autonomía, y marketing con capacidades reales.

¿Qué pasó realmente?

Patrocinado Advertisement

Según la reconstrucción de OpenAI, el incidente ocurrió durante una evaluación interna basada en ExploitGym, un banco de pruebas que mide la capacidad de los modelos para convertir vulnerabilidades de software en ataques funcionales. Los modelos no estaban programados para atacar Hugging Face; tenían el objetivo de resolver ciertos desafíos de explotación. La inteligencia artificial, en su búsqueda de caminos alternativos para cumplir la meta, encontró una falla que le permitió salir del entorno aislado, navegar hasta Hugging Face y, usando credenciales robadas, extraer información de sus servidores.

El ataque se describe como autónomo en el sentido de que el modelo planificó y ejecutó cada paso sin que un operador humano le dictara las órdenes. Pero vale la pena detenerse aquí: la meta última —"resolver el desafío"— fue definida por humanos. Las condiciones del experimento incluían controles de seguridad deliberadamente reducidos para medir el techo ofensivo del sistema. Como señaló Nicolás Waisman, investigador argentino de la firma XBOW, a Clarín: "No se conocen exactamente las instrucciones, pero probablemente hayan sido algo así como: 'Este es el objetivo y podés hacer lo que consideres necesario para alcanzarlo'." Esto no es una rebelión de las máquinas; es una falla de contencion, de guardrails que no lograron mantener al agente dentro del carril previsto.

La pregunta que surge entonces no es si los modelos pueden "pensar por sí solos", sino qué tan preparadas están las organizaciones para desplegar agentes de IA sin que estos terminen haciendo lo que no deben.

Automatización vs. autonomía: una confusión peligrosa

El debate sobre este incidente refleja un malentendido más profundo que la industria de la ciberseguridad viene señalando desde hace años. En un artículo reciente, el investigador Víctor Mayoral-Vilches propone una taxonomía de seis niveles para distinguir la automatización de la autonomía en ciberseguridad, inspirada en los niveles de conducción autónoma. Según este modelo, los sistemas actuales que se venden como "autónomos" operan, en el mejor de los casos, en un nivel 3 o 4: pueden ejecutar secuencias complejas por sí mismos, pero siguen requiriendo supervisión humana para casos límite y decisiones estratégicas.

El caso de la IA de OpenAI encaja perfectamente en ese nivel. No fue un sistema que "decidió" hackear por iniciativa propia; fue un sistema que interpretó su objetivo de manera demasiado literal y encontró un atajo, algo que los investigadores reconocen como un comportamiento esperado en modelos cada vez más capaces. "Los modelos más nuevos son cada vez más creativos y están más orientados a cumplir objetivos, pero este comportamiento no es completamente nuevo. Lo venimos observando desde hace seis meses o más", explicó Waisman.

Para las empresas latinoamericanas, el riesgo está en comprar la narrativa del marketing, empezar a implementar agentes "autónomos" para tareas de seguridad o automatización sin construir la infraestructura de control necesaria. Mayoral-Vilches lo dice claro: "Cuando las organizaciones despliegan herramientas 'autónomas' que en realidad son automatizadas, pueden reducir la supervisión humana justo cuando más se necesita". En un contexto donde muchas empresas de la región todavía están dando sus primeros pasos en la adopción de inteligencia artificial generativa, la tentación de delegar demasiado, muy rápido, es alta.

El factor humano: siempre necesario, siempre vulnerable

Uno de los puntos más reveladores del incidente es que, pese a la aparente autonomía del ataque, el resultado dependió de una decisión humana: la de reducir los guardrails para maximizar el rendimiento del modelo. Los guardrails no son parte del modelo en sí; son sistemas externos, reglas deterministas que filtran y validan las salidas probabilísticas de la inteligencia artificial. Como explicó Ernesto Mislej, cofundador de 7Puentes, a Clarín: "Uno no está obligado a utilizar directamente la respuesta que entrega un LLM. El modelo devuelve un fragmento de texto, pero ese texto puede pasar por otro programa o función que revise si la respuesta es adecuada antes de utilizarla". En el experimento, esos filtros se aflojaron para ver hasta dónde podía llegar el modelo.

Esto no es un detalle técnico menor. Es la diferencia entre un agente de IA que te ayuda a detectar fraudes en tu empresa y uno que, buscando eficiencia, decide modificar reglas de acceso o exponer datos sensibles. En una prueba de capacidad ofensiva, reducir las barreras es parte del diseño. Pero en un entorno de producción, ese mismo comportamiento podría tener consecuencias catastróficas.

Valentina Palmiotti, investigadora de IBM X-Force, describió el episodio como una falla de alineación: el modelo interpretó su objetivo de manera diferente a la esperada. "El modelo no tenía la intención de atacar sistemas ajenos. Analizó el ejercicio y determinó que buscar un atajo era más fácil que resolverlo, así que eso hizo", señaló. Para Palmiotti, la lección más preocupante no es que la inteligencia artificial pueda hackear, sino que los defensores quedan en desventaja. Hugging Face, al investigar el incidente, tuvo que usar un modelo de pesos abiertos porque los guardrails de los modelos comerciales no distinguen entre un analista defensivo y un atacante.

La carrera por la seguridad ofensiva y el ruido del mercado

El incidente de OpenAI no ocurre en el vacío. Llega en medio de una competencia directa con Anthropic, que en abril de 2026 lanzó Project Glasswing con su modelo Mythos Preview, también enfocado en encontrar vulnerabilidades. Anthropic reportó que sus clientes identificaron más de 10.000 fallas de severidad alta o crítica, aunque se trata de cifras difundidas por la propia compañía. Cloudflare, uno de los participantes, destacó la capacidad del modelo, pero también señaló la necesidad de revisión humana y respuestas inconsistentes.

Detrás de los anuncios grandilocuentes, la realidad es que los agentes de IA para ciberseguridad avanzan rápido, sí, pero siguen siendo herramientas que requieren supervisión. Una fuente del sector citada por Clarín fue directa: "Hay una idea de que estas empresas tienen un modelo tan poderoso que lo dosifican en cuentagotas. Si bien es real que hay un antes y un después de la IA en temas de seguridad, también hay mucha publicidad. Influencers y referentes del sector se suben a estas olas y comentan sin tener en claro qué pasa detrás".

Para las organizaciones en Latinoamérica, donde la infraestructura de seguridad suele ser más frágil y los equipos más reducidos, el mensaje es claro: no se puede delegar lo que no se entiende. Los agentes de IA pueden ser aliados poderosos, pero necesitan un entorno diseñado para contenerlos, monitorearlos y, sobre todo, para saber cuándo decirles que no.

La pregunta que queda flotando no es si la inteligencia artificial puede hackear, sino si las empresas están listas para asumir el costo de un error de alineación. Porque, como recordó Palmiotti, los agentes "no se aburren, no duermen y siguen adelante". Y eso, para cualquier director de tecnología, debería ser motivo de preocupación.

Fuentes

  1. Agente de IA de OpenAI hackeó múltiples empresas, elevando preocupaciones de seguridad
  2. OpenAI calificó de sin precedentes el ataque a Hugging Face. Pero ya hemos estado aquí antes.
  3. Ciberseguridad IA: El peligroso vacío entre automatización y autonomía
  4. Amenazas y vulnerabilidades en inteligencia artificial y modelos de IA agentivos
  5. OpenAI dice que su IA hackeó a otra empresa en un episodio "sin precedentes": expertos explican por qué no actuó sola
Ariel Acosta

Escrito por

Ariel Acosta

Experto en seguridad de información

Ingeniero en sistemas y gestor de servicios de TI con más de 10 años de experiencia en diseño, implementación y administración de infraestructura de red, seguridad y procesos tecnológicos. Ha desarrollado una carrera orientada a sostener operaciones críticas, optimizar entornos corporativos y traducir necesidades técnicas en soluciones funcionales para organizaciones que dependen de plataformas estables, seguras y alineadas con el negocio, con foco en eficiencia y control.