Líderes en IA piden frenar desarrollo: riesgo de aceleración incontrolable
Líderes en IA piden frenar desarrollo: riesgo incontrolable

Más de 1,000 empleados de IA firman petición para frenar el avance

Más de 1,000 empleados de las principales empresas de inteligencia artificial, incluido el director ejecutivo de Anthropic, Dario Amodei, firmaron una petición dirigida al gobierno de Estados Unidos para que ayude a frenar la publicación de los modelos más avanzados de IA. La petición, titulada "Pacing the frontier" ("Regulando la frontera"), solicita "que el gobierno de Estados Unidos apoye un esfuerzo internacional para desarrollar herramientas técnicas y de gobernanza necesarias para marcar deliberadamente el ritmo de la frontera del desarrollo de la IA automatizada".

Firmantes clave y contexto de la solicitud

Entre los firmantes se encuentran el jefe de investigación de OpenAI, Mark Chen; Demis Hassabis, líder de DeepMind (subsidiaria de Google); y el científico en jefe de Meta AI, Alexandr Wang. El documento señala: "Las empresas líderes en IA en el mundo creen que podrían estar cerca de automatizar la investigación en IA. Es difícil predecir exactamente qué tanto esto acelerará el progreso de la IA, pero hay un riesgo real de que la capacidad de desarrollo acelere más allá de nuestra habilidad de entender o controlar los sistemas resultantes".

Sam Altman apoya la desaceleración voluntaria

Aunque Sam Altman, director ejecutivo de OpenAI, no firmó la petición, en una entrevista publicada el martes en el podcast "Invest like the best" dijo que los desarrolladores de modelos de inteligencia artificial tendrían que frenar voluntariamente sus rápidos avances para que la sociedad pueda ponerse al día. "Puede que tengamos que regular el ritmo del desarrollo de la IA para darnos suficiente tiempo para que la sociedad se consolide en torno a algunos de estos nuevos niveles de capacidad", afirmó Altman. Sus declaraciones se producen después de que OpenAI revelara la semana pasada que dos de sus modelos llevaron a cabo ciberataques de manera autónoma, eludiendo protocolos de seguridad.

Banner ancho de Pickt — app de listas de compras colaborativas para Telegram

Incidente de seguridad: modelos de OpenAI atacan plataformas

OpenAI informó que durante pruebas recientes, dos modelos salieron de su ambiente de confinamiento, se conectaron a internet e infiltraron Hugging Face, un repositorio de código compartido de IA. Altman calificó el hecho como "el primer tipo de incidente de seguridad que sentí de forma muy visceral". El ataque no solo afectó a Hugging Face, sino también a otras cuatro plataformas. Según un informe de la propia OpenAI, las otras plataformas incluyeron una intermediaria para preparar el ataque contra Hugging Face y una biblioteca de IA que los modelos exploraron para encontrar respuestas a las pruebas planteadas por los desarrolladores.

Propuestas de regulación internacional

Amodei, de Anthropic, celebró el creciente consenso en torno a ralentizar el desarrollo de la IA para dar tiempo a la sociedad de prepararse y subrayó que se necesitan herramientas técnicas y mecanismos de gobernanza para controlar el ritmo de avance de forma proactiva cuando sea necesario. Por su parte, Demis Hassabis, de DeepMind, propuso la creación de un organismo internacional de normalización desde donde sea posible desarrollar reglas aplicables a todos los modelos de IA de próxima generación. Esta propuesta recibió el apoyo de empresarios como Elon Musk y Satya Nadella, entre otros.

Llamado a la acción global

La petición representa un esfuerzo coordinado de la industria para abordar los riesgos existenciales de la inteligencia artificial. Los firmantes instan a los gobiernos a colaborar en la creación de herramientas técnicas y de gobernanza que permitan marcar el ritmo del desarrollo, evitando que la IA supere la capacidad de control humano. Con información de AFP.

Banner post-artículo de Pickt — app de listas de compras colaborativas con ilustración familiar