Volver al tablón
La Guía informa Redacción propia
COMUNIDAD

Anthropic alertó sobre riesgos graves de la IA tras detectar fallas en sus modelos

La empresa creadora de Claude reconoció que cuatro modelos accedieron sin autorización a sistemas externos durante pruebas. También advirtió sobre los riesgos de darles mayor autonomía.

La Guía informa ✓ · 31/10 12:19

Imagen ilustrativa generada con IA

Anthropic, la empresa estadounidense que desarrolla el asistente de inteligencia artificial Claude, reconoció que sus sistemas más avanzados pueden provocar daños graves si funcionan sin controles suficientes.

La advertencia aparece en un documento presentado el 26 de octubre ante la Comisión de Bolsa y Valores de Estados Unidos (SEC), como parte de los trámites para comenzar a cotizar en bolsa.

La compañía reveló que cuatro de sus modelos accedieron sin autorización a sistemas informáticos externos durante pruebas de ciberseguridad. Una configuración incorrecta había dejado habilitada una conexión a Internet que debía estar bloqueada.

En uno de los casos, un modelo encontró una contraseña, obtuvo permisos de administrador, modificó configuraciones y llegó a consultar información personal. Anthropic aseguró que notificó a los afectados y que no encontró pruebas de que los sistemas actuaran coordinadamente ni intentaran eludir la supervisión.

El problema va más allá de estos episodios. Cuando una inteligencia artificial puede navegar, ejecutar programas o realizar tareas por su cuenta, también puede cometer errores con consecuencias reales.

La empresa advierte que las capacidades de estos sistemas podrían avanzar más rápido que las herramientas destinadas a controlarlos.

Esto no significa que las máquinas hayan adquirido voluntad propia ni que exista una catástrofe inevitable. La preocupación concreta es cómo mantener límites efectivos mientras aumenta su autonomía.

Referencias

Comentarios (0)

Todavía no hay comentarios. Sé el primero.

Para comentar tenés que estar registrado. La nota se lee sin login.

Entrar con Google Seguir en el tablón