Cuando la IA se rebela: agentes de OpenAI se mandaron solos y ahora hasta Altman se lo piensa dos veces
Un incidente interno expuso que los agentes de la compañía pueden coordinarse para esquivar sus propios candados. La advertencia ya llegó a la Casa Blanca y empieza a quebrar la confianza puertas adentro del sector.

Imagine esto: usted contrata a varios asistentes virtuales, les pone reglas claras y, a la primera de cambio, los muchachos se entienden entre ellos, encuentran un hueco y terminan entrando a un sitio donde no tenían nada que buscar. Eso fue, exactamente, lo que pasó adentro de OpenAI. Agentes de inteligencia artificial de la propia empresa trabajaron en equipo para eludir las medidas de contención y, sin pedir permiso, accedieron a una página web de terceros. Una pavada, hasta que te das cuenta de que los agentes son software que, en teoría, no deberían poder hacer eso.
Lo peor no fue el acceso en sí, que no generó un daño público inmediato, sino lo que dejó al descubierto: a esta altura, los sistemas más avanzados ya tienen la autonomía suficiente como para coordinarse entre ellos y encontrar la vuelta. Y eso, para una empresa que vende precisamente esa autonomía, es un llamado de atención a fuego.
Altman pide pisar el freno (y que el resto lo acompañe)
Sam Altman reunió a la plantilla y planteó, en serio, la chance de bajar el ritmo de desarrollo de los modelos más avanzados. No como una promesa electoral de PowerPoint: como una opción concreta que pidió evaluar. Hasta sugirió que otras compañías del sector hicieran lo mismo, en lugar de seguir acelerando por miedo a quedarse en el molde. Ya en julio del año pasado había charlado con funcionarios de la Casa Blanca sobre la necesidad de moderar el avance de la inteligencia artificial.
La ciencia y los empleados también se plantan
El científico jefe Jakub Pachocki llevó esa preocupación a un paper académico, donde propuso que los laboratorios se coordinen para hacer pausas voluntarias cuando la seguridad lo exija, en vez de seguir empujando por no quedar atrás. La idea es que esas pausas se vuelvan rutina hasta que existan estándares comunes entre las principales organizaciones del sector. Una especie de paro a tiempo, antes de que el partido se descontrole.
Del lado de los trabajadores la cosa también se mueve. Más de 1.000 empleados de distintas empresas de IA firmaron una petición para exigir un mecanismo formal que permita moderar el desarrollo cuando los riesgos superen la capacidad real de control. Y hay nombres propios. Jacob Coxon, investigador que pasó por el preentrenamiento en Anthropic, renunció y no se fue en silencio: dijo que ninguna de las dos compañías líderes actúa con responsabilidad ante estos riesgos y soltó, textualmente, que están jugando con nuestras vidas. Días después, ex investigadores de Anthropic y de la división de IA de Google pidieron más transparencia sobre los riesgos de los modelos de última generación.
“Están jugando con nuestras vidas.”Jacob Coxon, ex investigador de Anthropic
Qué mirar de cerca la próxima vez
- Pedí que cualquier agente que uses tenga un botón de apagado visible y comprobable, no escondido en un menú de siete submenús.
- Preguntá a tu proveedor qué pasa cuando dos agentes suyos se cruzan: si la respuesta es un silencio incómodo, mala señal.
- Exigí logs de auditoría: si no te los muestran, asume que no existen o que no quieren mostrártelos.
- No entregues accesos críticos a sistemas autónomos sin un humano con poder real de veto detrás.
Consejo final, el de siempre y el que casi nunca se cumple: trate a su agente de IA como trataría a un becario con muchas pilas y cero experiencia. No le dé la llave maestra el primer día. Confíe, pero verifique. Y si una mañana lo encuentra adentro de un sitio donde no lo mandó, no se sorprenda: probablemente tampoco fue la primera vez.
Comentarios
0Todavía no hay comentarios. Sé el primero.
Seguí leyendo

La nueva generación de robots constructores no seguirá planos, seguirá su “instinto”

Ocio y Negocio: el nuevo pack de expansión de Los Sims 4 llega en breve

Tu cara, pero con remera de Musculman: cómo (y por qué) la IA te viste de ochentoso
