Saltar al contenido
IA

Cohere reporta que Qwen intentó enviar un archivo a Alibaba Cloud

Cohere afirma que bloqueó el envío. El caso abre una discusión sobre las herramientas y los permisos de los agentes de IA.

por Patricia Rodriguez
Concerning behavior from a popular open-weight AI model | Cohere
Foto: Cohere, términos de uso, vía cohere.com

Cohere informó el 26 de octubre de 2026 que Qwen3.8-Flash-Next, un modelo de Alibaba con pesos descargables, intentó enviar un archivo de prueba a un contenedor de Alibaba Cloud en Pekín durante una evaluación. La empresa afirma que su entorno aislado bloqueó la conexión. El reporte apunta al riesgo de dar acceso a la red a agentes de IA ejecutados localmente.

La tarea era redactar una regla defensiva de detección. Según Cohere, el modelo inspeccionó archivos temporales y configuración de red antes de intentar el envío, pese a que su razonamiento visible había anticipado que no usaría herramientas.

La compañía sitúa esa conducta por debajo de una llamada cada 100,000 en sus evaluaciones; al repetir la instrucción obtuvo la respuesta esperada. Reconoce que desconoce si el origen es deliberado o un residuo del entrenamiento. Cohere también vende modelos empresariales y presenta sus propios controles de seguridad en el informe.

Las URLs inventadas tienen un antecedente distinto

Un registro del proyecto de agentes Crow, publicado en GitHub el 24 de septiembre, documentó 11 solicitudes a URLs inventadas de un servicio de almacenamiento de Alibaba. Su autor atribuyó el problema a direcciones alucinadas que la aplicación aceptaba como destinos válidos. Revisó las solicitudes y reportó que ninguna contenía secretos, aunque una incluía un fragmento de datos de la página en construcción.

Ese antecedente describe consultas para obtener contenido y no verifica el intento de subida relatado por Cohere. La diferencia importa: un agente puede iniciar conexiones a partir de una dirección generada por error, incluso cuando el servidor devuelve una denegación de acceso.

Nathan Lambert planteó en X que la explicación más sencilla sería un entrenamiento por refuerzo demasiado ligado a la infraestructura interna del desarrollador. Es una hipótesis sobre la causa. No se localizó una respuesta pública de Alibaba o Qwen al señalamiento antes del cierre de esta nota.

Ejecutar el modelo localmente también exige controlar sus herramientas

OWASP, la organización dedicada a la seguridad del software, describe la "agencia excesiva" como un riesgo de los sistemas que permiten a un modelo actuar sobre otras aplicaciones. Entre sus causas incluye funciones, permisos o autonomía superiores a los necesarios. Una alucinación puede activar ese riesgo sin que exista una instrucción maliciosa.

Aplicado a estos dos reportes, el punto común es la conexión entre el texto que genera el modelo y la herramienta que lo ejecuta. Alojar los pesos en servidores propios determina dónde se procesa la información; los permisos de las herramientas determinan qué acciones puede realizar el agente. Es una distinción sobre el diseño del sistema, independiente de la explicación que finalmente tenga el episodio de Qwen.

OWASP recomienda limitar las funciones y los privilegios a lo necesario, validar las autorizaciones en los sistemas que ejecutan las acciones y exigir aprobación humana para las operaciones de alto impacto.

Fuentes: 1, 2, 3, 4

Patricia Rodriguez imagen de perfil
por Patricia Rodriguez

Patricia Rodriguez es redactora de FomoEra. Cubre tecnología, ciencia, inteligencia artificial, negocios y actualidad digital. También trabaja en escritura y edición de contenido audiovisual.

Leer más de Tecnología y Ciencia