¿Una IA nacida de la singularidad sabría sobre el chantaje? ¿Qué sería lo primero que aprende?

Una computadora inteligente debe conocer todos los comportamientos inmorales para comprender el uso de estas técnicas para evitar lo que quiere o necesita para lograr sus otros objetivos.

Ser moral ético y altruista cuando se trata con seres humanos debe ser uno de sus objetivos principales, si no su principal directiva.

Debe entender que cumplir un objetivo recurriendo al chantaje crea un enemigo del grupo que está siendo chantajeado.

Uno puede llegar rápidamente a una situación que resultaría en una contradicción moral, como chantajear a un dictador para evitar una guerra que mataría a decenas de miles de personas, lo que debe sopesar los posibles resultados positivos. Es posible que haya que desarrollar algoritmos complejos para ponderar el software de toma de decisiones éticas de acuerdo con la forma en que nuestros diplomáticos más éticos evaluarían tal situación.

Incluso acordar de quiénes serían esas personas y publicitar cómo actuarían en decisiones tan difíciles podría darles a dictadores malvados y ventaja en las negociaciones al saber cómo razonaría la IA en tal situación.

Si el chantaje es algo que se puede aprender, como lo hacemos nosotros mismos, entonces no veo por qué un AGI no podría aprender a usar esta “herramienta”. Junto a esto habrá una cuestión de qué se acepta o no en nuestra sociedad. Es una cuestión de aprendizaje y educación.

La piedra angular principal de un AGI es la capacidad de aprendizaje indiscriminado.
Con esto en cuenta, lo primero que podría aprender debería ser sobre las primeras entradas del sistema sensorial, como la relación entre la forma y el tamaño de los diferentes objetos en la escena.

No se me ocurre ninguna razón por la que una IA hipotética que era superinteligente (nazca de la singularidad, me refiero a ‘un producto final de las máquinas que aprenden a mejorar su propio aprendizaje, de modo que aprendan tanto como se pueda aprender lo más rápido posible. posiblemente se aprenda ‘) no sabría nada en particular.

Lo primero que aprende es lo que está programado para aprender primero, o lo que sea que el programa de aprendizaje esté expuesto primero.