¿Cómo sería una prueba de fallas para una IA de computadora?

No se puede hacer para AGI, pero se puede (probablemente) hacer para AI. La inteligencia general artificial (AGI) probablemente no sucederá durante mucho tiempo (más de 2 décadas).

Primero para el escenario AGI (la pregunta formulada – “singularidad”):

R. He visto muchas películas de la prisión para ver que NO se puede hacer una prisión segura . Eso es lo que significa a prueba de fallas, estás bloqueando la IA (o incluso el robot). Posibles formas de hacerlo que no funcionarán:

Ninguna computadora en red es segura (a menos que tenga un código 100% seguro, demostrado que funciona, que no es humanamente posible, o al menos no lo ha hecho …). Es por eso que para máxima seguridad, se desconecta de las redes (como una prisión …). Si alguien está atendiendo a esta computadora, entonces la IA en ella puede manipular fácilmente a esa persona para ayudar a conectarla (obtenga un guardia de la prisión para ayudar a escapar).

Si su IA está en un robot, en el mundo (en red o no), entonces se sabe que los robots no son seguros. Se supone que la IA hace que el robot sea más seguro. No digo que AI tenga dependencia (o debe) ser un sociópata, pero ¿puedes descartarlo?

Una IA, para tener inteligencia tendrá que tener la capacidad de aprender. Al igual que los humanos. Creo que es inherente, que puedes aprender las cosas “incorrectas” y tal vez aprender a mentir.

¿Puedes garantizar que tu hijo no saldrá mal? ¿O incluso hacer algo incorrecto por accidente?

B. Para la variante “IA débil”. Como los autos sin conductor. El tipo que está decidido a hacer bien una cosa [y no puede hacer otras cosas, como la IA, no es “general”]. Este tipo puede ser seguro, o al menos más seguro que un humano.

Pero, cuando ocurran accidentes, queremos culpar a un humano. Entonces tienes un dilema con los autos sin conductor que matan …

Ahora, para la IA militar, ya discutida con el Departamento de Defensa, algunos piensan que podríamos tener “guerras más seguras” (o que la IA sería un elemento disuasorio, como la bomba nuclear …). Eso está equivocado, y la oposición quiere un humano en el circuito. Nuevamente, también porque queremos culpar a los humanos por la muerte, no a una máquina.

Mientras que la IA militar, se supone que mata (o defiende, amenazándola), mientras que un automóvil no lo es, y parecen ser opuestos, no lo son. Al menos no en todos los casos. Para un automóvil, podría encontrarse con una situación en la que necesita matarlo con una probabilidad probable en lugar de girar el volante y arriesgarse a un autobús escolar lleno de niños.

La premisa básica de la toma de posesión de la IA es que no existían algunos a prueba de fallas. Que se hizo cargo y explotó a toda la humanidad en milisegundos y nadie pudo hacer nada para detenerlo. Pero la realidad básica es que todas las computadoras tienen varios interruptores de apagado, comenzando con estos, los destinados a ayudar en caso de incendio. Las computadoras operan fuera de los límites humanos; pueden soportar congelación sub-sub y casi hirviendo. Pero no pueden soportar hervir y morirían en un incendio. Además, la mayoría de los sistemas de extinción de incendios apagarían las computadoras. A falta de un cambio dramático en el material real del que están hechas las computadoras, estaríamos seguros de matarlos con fuego por un tiempo.

Pero la realidad de la ‘singularidad’ es algo completamente distinto. Lo más probable es que su trabajo dependa de una computadora y si tuviera que hacer su trabajo sin computadoras, sería un gran inconveniente como mínimo e imposible en el peor de los casos. A medida que AI se hace cargo de las tareas de pensamiento, nos damos cuenta de que la sociedad ya no necesita personas. Tal vez el trabajo que solía hacer ya no existe porque una computadora puede hacerlo por usted. El verdadero problema con la IA haciendo todo por nosotros es que socava algunos de los principios centrales de nuestra sociedad. ¿Qué hace una sociedad cuando las computadoras pueden calcular las mejores decisiones para nosotros? ¿Qué hacemos cuando no necesitamos preocuparnos por tareas triviales ni no triviales? ¿Para qué sirve la gente?

Dada la forma en que tratamos las formas de vida “inferiores”, así como las de nuestra propia especie, ¿cómo merecemos ser tratados?