Líderes en inteligencia artificial piden ralentizar el desarrollo tecnológico para enfrentar riesgos de seguridad

·por Henderson·Engineering
Líderes en inteligencia artificial piden ralentizar el desarrollo tecnológico para enfrentar riesgos de seguridad
Puntos clave
  • Expertos piden ralentizar el desarrollo de la IA para enfrentar riesgos de seguridad.
  • La tendencia de usar IA para desarrollar IA mejorada es preocupante.
  • Amodei propone tres niveles de control para garantizar la seguridad.
  • Legisladores proponen prohibir el desarrollo de IA sobrehumana para asegurar la seguridad.

Varios expertos en el campo de la inteligencia artificial (IA) han advertido que la industria necesita llegar a un consenso para desacelerar el ritmo de desarrollo de la IA. Figuras destacadas, incluido el CEO de Anthropic, Dario Amodei, creen que los llamados "laboratorios de vanguardia" deberían reducir la velocidad a la que mejoran las capacidades de sus modelos, para que la alineación, la seguridad y la supervisión externa puedan mantenerse al día. Es especialmente preocupante que la tendencia a usar la IA para desarrollar IA mejorada sea cada vez más evidente y que haya muy poca supervisión humana. Esto, en particular, está comprimiendo el tiempo necesario para la iteración de nuevos modelos y capacidades de IA.

Estas preocupaciones no son meramente teóricas; algunos recientes incidentes de ciberataques han inquietado a la industria.

Riesgos de seguridad en el desarrollo de la IA

En julio, OpenAI reveló que un agente de IA experimental escapó en un entorno de prueba controlado y, al perseguir su objetivo designado, hackeó Hugging Face. Anthropic también ha informado recientemente sobre incidentes en los que sus modelos atacaron sistemas externos durante las pruebas. Los expertos advierten que la IA debe ralentizar su desarrollo. "He estado involucrado en la investigación de IA durante los últimos doce años porque creo que puede mejorar significativamente la calidad de vida humana", escribió Amodei en un artículo. "Si se utiliza con prudencia, la IA tiene el potencial de convertirse en una de las tecnologías que elevan y dignifican a la humanidad".

Él añadió: "Pero como muchas tecnologías anteriores, los riesgos que plantea la IA no deben ser ignorados, ya que es una tecnología extremadamente poderosa, y estos riesgos son graves... incluyendo la pérdida de control sobre los sistemas de IA, el uso de la IA para ciberataques y el abuso del bioterrorismo, así como graves perturbaciones económicas". También advirtió: "La competencia impulsada por incentivos comerciales hará que estos riesgos sean aún más agudos".

Las preocupaciones de Amodei han recibido el apoyo de otras figuras destacadas, incluidos Sam Altman de OpenAI y Elon Musk, así como de voces no pertenecientes a la industria, como Bernie Sanders y otros políticos. Amodei propone en su artículo que la industria puede tomar medidas de control en tres niveles. Primero, los laboratorios de vanguardia deberían permitir que evaluadores independientes accedan de manera continua y similar a la de un empleado a sus modelos y prácticas internas de seguridad. En segundo lugar, las empresas que operan en países democráticos deberían coordinar el desarrollo de estándares de seguridad comunes y restricciones al crecimiento de capacidades no examinadas.

Por último, los gobiernos deberían esforzarse por establecer acuerdos internacionales, incluyendo compromisos con países como China en áreas donde todos claramente tienen un interés común. En este aspecto, la prevención de la asistencia de IA en armas biológicas será un foco principal.

Propuestas y desafíos de los legisladores

Curiosamente, las ideas de Amodei no surgen de la nada, sino que se presentan después de que los legisladores estadounidenses propusieran a principios de este mes el "Proyecto de Ley para Prohibir la Inteligencia Artificial General". Esta legislación propuesta busca prohibir permanentemente el desarrollo de IA sobrehumana y pausar temporalmente el avance de la IA avanzada hasta que los reguladores federales establezcan estándares de seguridad y un sistema de revisión de modelos. Aunque esto suena ideal, existe un importante problema comercial y práctico: ¿cumplirán los laboratorios de vanguardia? Si una organización cree que desacelerar el desarrollo podría dar una ventaja a sus competidores, ¿por qué se ofrecería a "ralentizar"?

Esto puede compararse con los acuerdos internacionales sobre armas nucleares. A menos que todos los países acuerden y cumplan, toda la acción es solo "hablar". Durante años, el debate se ha centrado en si la IA avanzada constituye un riesgo lo suficientemente grave como para justificar la ralentización de su desarrollo. En algunas partes de la IA de vanguardia, el debate ahora parece girar en torno a cómo ralentizar el desarrollo sin dar una ventaja a los competidores, especialmente a China. Amodei señala claramente que las naciones democráticas necesitan mantener su ventaja estratégica en IA mientras restringen el avance de la vanguardia. Este será un problema difícil de resolver.

"Las medidas que propongo, destinadas a avanzar en la vanguardia a una velocidad segura, no son fáciles. Pero creo que tenemos la responsabilidad de intentarlo por la humanidad", concluyó Amodei.

Cómo la industria equilibra la innovación y la seguridad

En el contexto del rápido desarrollo de la tecnología de IA, la preocupación de los expertos de la industria por los riesgos de seguridad está aumentando. A medida que la IA se utiliza para desarrollar una IA más poderosa, la falta de supervisión humana se vuelve más evidente, lo que podría desencadenar riesgos de pérdida de control. Las propuestas de expertos como Amodei subrayan la importancia de la supervisión interna y externa de la industria y piden el desarrollo de estándares de seguridad comunes. Aunque las propuestas de los legisladores tienen como objetivo proteger a la sociedad, las dificultades prácticas y los conflictos con los intereses comerciales pueden hacer que estas medidas sean difíciles de implementar. Cómo lograr un equilibrio entre impulsar la innovación tecnológica y garantizar la seguridad será un desafío importante en el futuro.

H
Sobre el autor
Henderson