Armas autónomas y nucleares, robots e inteligencia artificial: cómo regular tecnologías de consecuencias imprevisibles para la humanidad
Ante el avance de la IA, expertos en derechos digitales reclaman comenzar a supervisar los algoritmos y mejorarlos de manera preventiva, para evitar que violen derechos humanos
- 7 minutos de lectura'
![La Campaña para frenar a los robots asesinos surgió hace unos años en Europa pidiendo el fin al desarrollo de armas autónomas](https://www.lanacion.com.ar/resizer/v2/la-campana-para-frenar-a-los-robots-asesinos-Z6KI3WYJDZE3RDMHTLNEGXRMIU.jpg?auth=3c5aaaea3a6514dae14d604561d2018a0c61bfc5c2ca4b77bac52ed6b9b08591&width=420&height=280&quality=70&smart=true)
No es la primera vez que la humanidad se enfrenta a un desarrollo tecnológico de consecuencias imprevisibles para su propia existencia. El escritor Isaac Asimov ya planteó en Círculo vicioso, un relato publicado en 1942, tres normas para proteger a las personas de los robots y su base se sigue usando como referente. El Organismo Internacional de Energía Atómica se creó en 1957 “como respuesta a los profundos temores y las expectativas que infundían los descubrimientos y variados usos de la tecnología nuclear”, según la propia organización.
El Derecho Internacional Humanitario (conocido como derecho de la guerra) lleva años buscando una regulación efectiva de los Sistemas de Armas Autónomas Letales, que pueden atacar sin intervención humana. Europa ha arrancado ahora la tramitación de la primera normativa del mundo sobre la inteligencia artificial (IA), un desarrollo tecnológico capaz de acelerar avances en campos fundamentales como la salud o la energía, pero también de amenazar democracias, aumentar la discriminación o romper todos los límites de la privacidad. “Sembrar pánico infundado no ayuda, al contrario. La inteligencia artificial va a seguir funcionando y debemos mejorarla y prevenir”, defiende Cecilia Danesi, divulgadora y abogada especializada en IA y derechos digitales, profesora en varias universidades internacionales y autora de El imperio de los algoritmos (recién publicado por Galerna).
![Un dron Reaper de la Fuerza Aérea de Estados Unidos en Afganistán en 2018. Estos aviones no tripulados podrían convertirse en armas letales autónomas en el futuro](https://resizer.glanacion.com/resizer/v2/un-dron-reaper-de-la-fuerza-aerea-de-estados-HRTN33WZ2VDHTNE5BMD7YMHFXI.jpg?auth=d1bcd59a21d7f82f540a5a9d1b0dfba3b51dbf61aa517f4d3c9af52e7d7b0b22&width=420&height=280&quality=70&smart=true)
Lo primero que hay que comprender es qué es un algoritmo, la base de la inteligencia artificial. Danesi, investigadora en el Instituto de Estudios Europeos y Derechos Humanos, lo describe en su obra, un compendio fundamental para entender el escenario al que se enfrenta la humanidad, como un “conjunto metódico de pasos que pueden emplearse para hacer cálculos, resolver problemas y alcanzar decisiones”. De esta forma, el algoritmo no es el cálculo, sino el método. Y este es el que puede incluir el modelo preciso para identificar un cáncer en imágenes, descubrir una nueva molécula con usos farmacológicos, hacer más eficiente un proceso industrial, desarrollar un nuevo tratamiento o, por el contrario, generar discriminación, una información falsa, una imagen humillante o una situación injusta.
El director de OpenAI, Sam Altman, el premio Turing Geoff Hinton, el investigador de IA Yoshua Bengio y Elon Musk, entre otros, han reclamado la regulación y acción urgente para abordar los “riesgos existenciales” que la IA representa para la humanidad. Entre estos destacan el aumento y amplificación de la desinformación (como la preponderancia de contenidos falsos y maliciosos en plataformas sociales), los sesgos que refuerzan las desigualdades (como el sistema de crédito social chino o la consideración mecánica de personas como riesgos potenciales por su etnia) o la ruptura de todos los límites de la privacidad para recabar los datos que alimentan el algoritmo y que permanecen ocultos.
La Unión Europea ha comenzado a negociar la que, de cumplirse los plazos, está llamada a ser la primera ley de IA del mundo. Se podría aprobar durante la presidencia española de la UE y tiene como objetivo prevenir los usos considerados como “riesgos inaceptables” (reconocimiento facial indiscriminado o manipulación del comportamiento de las personas), regular su uso en sectores como la salud y la educación, así como sancionar e impedir la venta de sistemas que incumplan la legislación.
![Cecilia Danesi](https://resizer.glanacion.com/resizer/v2/cecilia-BT6U7KMSUFDNVFLD4WZUI4VHAY.jpg?auth=68d4ac9d7919f5851767ca8551d33878409775d5b88b3e45417033c8c523fa58&width=420&height=280&quality=70&smart=true)
La Unesco ha desarrollado un marco ético voluntario, pero este mismo carácter es su principal debilidad. China y Rusia, dos países que utilizan esta tecnología para vigilancias masivas de la población, han firmado estos principios.
“Hay derechos fundamentales involucrados y es un tema que nos tiene que ocupar y preocupar, sí, pero con equilibrio”, defiende Danesi. Es un criterio similar al que expone Juhan Lepassaar, director ejecutivo de la Agencia Europea de Ciberseguridad (Enisa por sus siglas en inglés): “Si queremos asegurar los sistemas de IA y también garantizar la privacidad, debemos analizar cómo funcionan estos sistemas. ENISA está estudiando la complejidad técnica de la IA para mitigar mejor los riesgos de ciberseguridad. También necesitamos encontrar el equilibrio adecuado entre seguridad y rendimiento del sistema”.
Uno de los riesgos expuestos hasta ahora ha sido la sustitución de personas por máquinas operadas por la IA. En este sentido, la investigadora Cecilia Danesi afirma: “Las máquinas nos van a reemplazar y ya lo están haciendo. Hay muchísimas que nos sustituyen, potencian el trabajo o nos complementan. El tema está en qué y dónde queremos que nos reemplacen, y qué requisitos tienen que cumplir estas máquinas para tomar ciertas decisiones. Primero tenemos que identificar un problema o una necesidad que justifique utilizarla o no”.
![Este perro robot de Ghost Robotics puede llevar un rifle a control remoto en el lomo](https://resizer.glanacion.com/resizer/v2/este-perro-robot-de-ghost-robotics-puede-llevar-S2IVRKT3ZZD45MM6Z7S6ZCBOLI.jpg?auth=75eb5a0c2664c60da618900f968455b5df8897b74966d81455a9c1277d1e66e5&width=420&height=280&quality=70&smart=true)
En el campo de la robótica, Asimov ya se anticipó a este problema y estableció tres principios: 1) Un robot no hará daño a un ser humano ni permitirá que, por inacción, esta sufra daño; 2) Un robot obedecerá las órdenes que reciba de un ser humano, a no ser que las órdenes entren en conflicto con la primera ley; y 3) Un robot protegerá su propia existencia en la medida en que dicha protección no entre en conflicto con las leyes primera y segunda.
Supervisión permanente y preventiva
“Parece genial. Listo: la inteligencia artificial nunca puede dañar a un humano. Divino. El problema es que en la práctica no está tan claro”, explica Danesi. La investigadora recuerda “un caso en el que programaron dos máquinas para optimizar una negociación y el sistema entendió que la mejor manera era crear otro lenguaje más eficiente. Quienes habían diseñado el programa no podían entender ese lenguaje y las desconectaron. El sistema se manejó dentro de los parámetros, pero la inteligencia artificial puede ir más allá de lo que se imagina”. En este caso, la máquina no dañó a sus programadores, pero los excluyó de la solución y de las consecuencias de esta.
La clave, para Danesi, es “la supervisión permanente, las auditorías algorítmicas de estos sistemas que son de alto riesgo, que pueden afectar de manera considerable derechos humanos o cuestiones de seguridad. Tienen que ser evaluados y revisados para comprobar que no violan derechos, que no tienen sesgos. Y debe hacerse de forma continuada porque los sistemas, como siguen aprendiendo, pueden adquirir un sesgo. Y se debe actuar de forma preventiva para evitar daños y generar sistemas que sean éticos y respetuosos con los derechos humanos”.
Otro de los grandes peligros del uso sin control de la IA es su utilización con fines militares. La propuesta de normativa de la UE excluye este aspecto en su primera redacción. “Es uno de los usos más peligrosos que tienen la inteligencia artificial. Muchas veces las leyes prohíben algo que, luego, en la práctica, sigue funcionando y es donde más daño puede hacer a las personas”, lamenta la investigadora.
“¿Debemos temerles a las máquinas?, la respuesta es ¡No! Debemos, en su caso, temerles a las personas por el uso que puedan llegar a darle a la tecnología”, defiende Danesi en su obra El imperio de los algoritmos.
Respeto a los datos de los ciudadanos
En términos parecidos se pronuncia Manuel R. Torres, catedrático de Ciencia Política de la Universidad Pablo de Olavide y miembro del consejo asesor del Real Instituto Elcano. “El problema es la proliferación de una tecnología que hay que evitar que llegue a la mano incorrecta. No es simplemente un conocimiento que se ha liberado al mundo y que cualquiera puede hacer uso”.
Torres añade un problema al escenario tecnológico y a la propuesta de normativa europea, que defiende como potencia reguladora: “El conflicto está en cómo se desarrolla esa tecnología en otros ámbitos que no tienen ningún tipo de escrúpulo ni limitación en cuanto al respeto de la privacidad de los ciudadanos que alimentan todo eso con sus datos”.
El politólogo pone como ejemplo el caso de China: “No solo está dentro de esa carrera de tecnológica, sino que no tiene ningún tipo de problema en utilizar de manera masiva los datos que dejen sus propios ciudadanos para alimentar y perfeccionar esos sistemas. Por muy escrupulosos que queramos ser con los límites que ponemos a nuestros desarrolladores locales, al final, si esto no se produce de manera global, también es peligroso”.
Torres concluye: “Nos encontramos en un territorio donde hay pocos referentes en los que nos podemos apoyar para saber cómo tenemos que abordar el problema y donde, además, hay un problema de entendimiento de las repercusiones de esa tecnología. Muchos de nuestros legisladores no son precisamente personas familiarizadas con estos desarrollos”.
EL PAIS