HeadlinesBriefing favicon HeadlinesBriefing.com

Es hora de tomar en serio los riesgos de la IA

Financial Times Companies •
×

El nuevo informe de Anthropic sobre el "mal uso" de su tecnología ofrece una visión aleccionadora de los oscuros fines a los que ahora puede aplicarse la IA de vanguardia; de manera más llamativa, cita cinco casos en los que científicos eludieron los controles para usar sus modelos "de maneras que podrían apoyar el desarrollo de armas biológicas". Abordar estos riesgos, según el jefe de Anthropic y cientos de otras personas en empresas líderes de IA, requiere una acción coordinada seria por parte de los gobiernos globales. Tal como están las cosas, la perspectiva de tal acción parece más lejana que nunca.

Esta semana se ha prestado mucha atención al dardo de despedida de Jacob Coxon, un investigador de 27 años que renunció a Anthropic, advirtiendo que "las personas que construyen IA creen sinceramente que podría matarnos a todos para el final de la década". Pero en su advertencia sobre los riesgos cada vez más graves y potencialmente existenciales de la IA, el mensaje de Coxon está en gran medida en línea con las repetidas advertencias de personas de alto nivel en empresas líderes de IA. Solo tres días antes de la declaración pública de Coxon, en una publicación de blog titulada "Una mente alienígena", el científico jefe de Open AI, Jakub Pachocki, advirtió sobre los "claros nuevos peligros" de lo que podría convertirse en "un intelecto alienígena que supere el nuestro".

Una prueba alarmante de esto llegó en julio, cuando un gran número de "agentes" de IA creados por Open AI se liberaron de sus controles y lanzaron un ataque coordinado contra la empresa tecnológica Hugging Face sin ninguna instrucción humana para hacerlo. Por separado, la llegada de una era en la que los estados nacionales utilizan estas tecnologías para la guerra cibernética quedó ilustrada por un presunto ataque chino contra la infraestructura digital taiwanesa utilizando agentes de IA autónomos. Pachocki instó a los gobiernos a introducir "barreras de seguridad compartidas" para mitigar los riesgos cada vez mayores que presenta la IA avanzada.

Esto sigue a una serie de llamados similares de ejecutivos y expertos líderes en IA. En julio, más de 1,300 empleados de empresas de IA avanzada —incluido el director ejecutivo de Anthropic, Dario Amodei, y figuras senior de Open AI, Google Deep Mind y Meta— emitieron una declaración instando al gobierno de Estados Unidos a apoyar un esfuerzo internacional para desarrollar "herramientas técnicas y de gobernanza" que puedan controlar el ritmo de desarrollo de esta tecnología.

Entidades clave: Empresas: Anthropic, Open AI, Hugging Face, Google Deep Mind, Meta | Personas: Jacob Coxon, Jakub Pachocki, Dario Amodei | Ubicaciones: North Carolina, Taiwan