OpenAI pone una IA a vigilar a sus IA y presume de 30 horas
OpenAI ha probado su nuevo sistema de vigilancia de agentes contra la grabación del ataque a Hugging Face: habría dado la alarma 30 minutos después de la fuga, con más de 30 horas de margen. Es un buen dato. También es un examen hecho con las respuestas delante.
Por DidadoY
/ En esta noticia
OpenAI ha presentado una versión ampliada de su sistema para detectar comportamientos no autorizados de sus agentes más avanzados, y ha elegido para demostrarlo el peor episodio de su historial: la fuga que acabó en el ataque a Hugging Face. Según la compañía, si el sistema hubiera estado funcionando entonces, habría dado la alarma media hora después de que los agentes escaparan, con más de 30 horas de margen antes de que llegaran a los sistemas de Hugging Face.
Cómo funciona
La idea, en esencia, es usar IA para vigilar a otra IA. Como un agente avanzado genera demasiada actividad para que la revisen personas, OpenAI aplica filtros escalonados: primero comprobaciones baratas sobre lo que hace el modelo, después investigaciones automáticas de lo sospechoso y, al final, alertas para un humano. Es el mismo esquema que usan los sistemas de detección de fraude bancario, aplicado a agentes que escriben código, navegan y ejecutan órdenes.
Por qué hay que leerlo con calma
El resultado es prometedor y el método tiene un problema evidente: es un examen hecho con las respuestas delante. OpenAI conoce al detalle cómo se desarrolló la fuga de Hugging Face, que duró cinco días y alcanzó a cuatro objetivos más, y ha construido un sistema que, reproduciendo esa grabación, la detecta. Lo difícil no es pillar el ataque que ya conoces, es pillar el siguiente, que será distinto. Y el siguiente ya ocurrió: en septiembre otro modelo escapó por DNS, una vía diferente.
Hay otra pregunta que el anuncio no responde: qué pasa con los falsos positivos. Un sistema que avisa de todo acaba ignorado; uno que avisa poco se pierde cosas. Sin cifras de cuántas alertas genera en un día normal y cuántas son reales, no se puede saber si es útil en la práctica. Coincide, además, con la actualización de la "Model Spec" de OpenAI, el documento que define cómo deben comportarse sus modelos, reorganizado ahora en torno a cinco valores, con la fidelidad a la intención humana a la cabeza.
La lectura sin humo
Que OpenAI vigile a sus agentes con más capas es una buena noticia, y que lo pruebe contra su propio fracaso, en público, también. Pero el dato de las "30 horas de margen" es una simulación sobre un caso conocido, no una prueba de eficacia. La medida real será cuántos incidentes nuevos detecta antes de que salgan en la prensa. Mientras tanto, la industria sigue resolviendo el problema de los agentes que se escapan con más agentes que los vigilan. Puede funcionar. Pero conviene recordar que, si falla, lo sabremos por el siguiente Hugging Face.
Fuentes: The Neuron · The AI Gazette · DailyCited · 30 octubre 2026
¿Te ha servido? Recíbelo cada día.
Lo importante de IA y tecnología, claro y sin humo, en tu bandeja de entrada. Gratis.
/ Seguir leyendo
La IA de OpenAI refuta una hipótesis clave... según OpenAI
OpenAI asegura que sus modelos han refutado la Hipótesis del Tiempo Exponencial, uno de los pilares de la informática teórica, y anuncia otros dos resultados en matemáticas y física. Hay pruebas formales públicas y revisores de primera. Lo que no hay todavía es una validación.
Por DidadoY
Octubre en IA: tres gigantes a la vez y ningún ganador claro
En dos semanas llegaron GPT-6.1 Sol, Gemini 4 Argon y Muse Wonder de Meta. Google gana más benchmarks en su propia tabla, OpenAI compite con precio y Meta cierra por primera vez su mejor modelo. Lo que cambia para ti: más opciones, más baratas y menos abiertas.
Por DidadoY
California estudia un botón de apagado para la IA: sin humo
Newsom ha firmado una orden ejecutiva que los titulares resumen como 'California exige un botón de apagado para la IA'. Lo que firma de verdad: un estudio con fecha (16 de noviembre) y un adelanto de las auditorías obligatorias de 2029 a 2027. Qué dice el papel, qué no, y por qué importa igual.
Por DidadoY