¿Alguno humano ha fallado alguna vez en la prueba de Turing?

La respuesta corta es y es muy probable que seas uno de esos … no te preocupes, yo también y la mayoría de los humanos que han usado Internet en la última década más o menos.

Para más pruebas presento a la corte CAPTCHA; CAPTCHA fue, y sigue siendo, un intento de hacer la distinción entre humanos reales y bots mientras se maneja la gran cantidad de solicitudes que ocurren en un sitio web grande. Es una forma de prueba de Turing automatizada, y la forma en que funciona es reemplazando al juez humano creando una prueba que sabemos que es muy difícil para las computadoras pero relativamente fácil para los humanos (a menudo OCR con texto distorsionado / ofuscado). La forma de hacerlo es seleccionando (o generando) imágenes que se sabe que no son reconocidas por los motores de última generación.

Sin embargo, a veces, la imagen es difícil incluso para los humanos, y he tenido momentos en que fallé la prueba porque una “Q” se parecía mucho a una “O” o algo así. Claro que puede culparlo de que la prueba sea imperfecta, pero también lo es la prueba de Turing “clásica” basada en una conversación.

La prueba clásica de Turing también es fácil de fallar a propósito: solo necesito conversar como creo que lo haría un robot de conversación, por ejemplo respondiendo a algo como una reformulación (como el viejo ELIZA), o simplemente agregando algunas cosas raras como un obsequio (¿qué tal si se pone un código SQL al final de las respuestas al azar?) que debería engañar a cualquier juez

La pregunta es, entonces, ¿puedes pasar la prueba de Turing como humano? ¿O es el fracaso del juez en identificarte como humano?

Tiendo a pensar que es principalmente lo último. Por lo tanto, si realmente desea hacer una prueba de Turing adecuada, suponiendo que esto sea posible, necesita un gran panel de jueces para cualquier entrevistado (similar a por qué CAPTCHA le permite intentarlo de nuevo: sabe que no es bueno, por lo que no es un prueba dura con intentos limitados).

Las personas se centran en la prueba de Turing como la prueba definitiva de IA; No lo es. Se ha debatido sobre su relevancia y su fuerte sesgo hacia el conductismo (que también es algo que se ha debatido hasta la muerte en su precisión al representar la inteligencia humana o incluso la inteligencia en general). Lo que fue bueno en la prueba de Turing no es realmente la prueba en sí, sino algunos otros aspectos:

  • Tal prueba mostró que la IA puede ser algo que vale la pena probar, es decir, era algo posible. Y la IA es un gran paso en sí mismo.
  • La prueba fue elegante ya que trató de evitar responder qué es realmente la inteligencia (una pregunta para la que no tenemos una respuesta). Cualquier buena prueba científica necesita probar las propiedades del resultado más que el resultado en sí mismo y la prueba de Turing se ajusta bastante bien (aunque, como dije, se basa en gran medida en la suposición conductista).

Entonces sí, Turing fue realmente el genio que sentó algunas bases para el trabajo de CS en IA. Dicho esto, ni su prueba es la mejor manera de diferenciar a los humanos de las computadoras ni será bueno para identificar si alguna vez tenemos una IA global: incluso si lo hiciera, solo moverá el hito a otro punto (como sucedió con ajedrez, considerado como un hito importante en ese momento, o cualquier hito anterior presentado como el mejor por algunas personas que necesitan buenos titulares / relaciones públicas en las noticias)

La prueba de Turing generalmente se administra con un grupo de humanos como control. La persona que trata de notar la diferencia (los participantes) no sabe si está hablando con una máquina o con un humano. En la prueba de 2011 de Cleverbot, los participantes dieron a cada entidad que conversaron con una calificación de “humanidad” del 1 al 10. Cleverbot recibió una calificación promedio de 5.9, pero los humanos solo recibieron una calificación de 6.3.

Se puede inferir de esos puntajes que algunos humanos recibieron un puntaje que fue en general más bajo que el recibido por Cleverbot.

La pregunta es, si una máquina tiene puntajes más altos que los humanos correspondientes con los que está compitiendo, ¿la máquina pasa la prueba o falla el humano?

Sí, me vienen a la mente dos instancias, ambas en cuotas del Premio Loebner.
Uno fue confundido con una computadora porque se consideraba que tenía más conocimiento sobre Shakespeare que un humano: ella era una experta en el tema.
Otro fue confundido con una computadora porque ocasionalmente actuaba, por frivolidad, como un robot.
Ha habido más casos de naturaleza menos notable, como cuando una computadora hizo más errores tipográficos que el humano y, por lo tanto, uno se confundió con el otro. Creo que la más reciente de estas identificaciones erróneas se puede encontrar en este documento, mientras que los dos casos antes mencionados se pueden encontrar con un poco de Google.

Por supuesto, las pruebas de Turing en realidad no evalúan la aprobación o el fracaso de los participantes humanos, pero supongo que por “falla” nos referimos a cuando un humano se considera una computadora mientras participa como sujeto de control en una prueba de Turing.

Hubo algunas pruebas de Turing que se hicieron donde los jueces pensaban que los humanos eran los programas. En ese sentido, los humanos “fallaron” en convencer a los jueces de que eran humanos.

Esta es una pregunta bastante incómoda.

La metodología de la “prueba de Turing” tiene una computadora en una “habitación” y un humano en otra, con los dos en comunicación. Un panel de jueces observa la conversación y decide si la “sala” tiene una computadora o un ser humano.

Turing fue un genio, pero esta “prueba” en particular no se configuró para determinar si un humano es más inteligente que una computadora. Fue configurado para determinar si una computadora podría ser programada para engañar a los jueces.

La prueba de Turing nunca “fallará” a un humano. Solo puede “pasar” o “fallar” una computadora engañando a un panel de jueces.

Aparte de la incomodidad de la pregunta, las discusiones de los otros encuestados son bastante válidas e informativas.

Dado que la prueba de Turing, por diseño, prueba la capacidad de las computadoras para emular a los humanos , en realidad no es posible que un humano haya fallado porque los humanos no son los que están siendo probados.

Realmente se pregunta, por supuesto, si hay seres humanos que se comunican en un léxico / lenguaje vernáculo tan jodidamente extraño que no pueden demostrar, a través de una pantalla, que son humanos. La respuesta es que, por supuesto, los hay: simplemente encuentre a alguien que no entienda / viva en línea con el espíritu de la sociedad en la que vive, y ahí estamos.

La prueba de Turing inversa, por otro lado, prueba la capacidad de los humanos para emular una computadora, y pasan si son indistinguibles de uno al juez humano. Ahora que, un humano puede fallar fácilmente. Lo cual, por supuesto, es irrelevante para lo que estaba preguntando, pero como ya lo escribí, supongo que se quedará.

More Interesting

¿Podría una futura IA resolver viajes más rápidos que la luz?

¿Cuáles son los conceptos empleados en esta charla TED? Video en los detalles.

¿Cuánto tiempo mínimo se requiere para comprender los conceptos básicos de aprendizaje automático / profundo para un principiante?

¿Cuál será la amenaza de la IA para la sociedad humana?

¿Cuál es la diferencia entre IoT e inteligencia artificial?

¿Alguien ha creado un motor de inferencia sensoriomotor generalizado antes?

Cómo usar AI para prohibir imágenes pornográficas en mi sitio web

¿Pueden las computadoras reemplazar a los abogados?

Si fuera posible construir un hardware de IA con la misma cantidad de neuronas artificiales y sinapsis que el cerebro humano, ¿sería esta máquina más inteligente que una persona ya que los circuitos electrónicos funcionan mucho más rápido que la transmisión de neuronas?

Si todas las respuestas de Quora son solo combinaciones de 100,000 palabras, ¿por qué no cree que la inteligencia artificial no puede generar todas las respuestas?

¿Los robots están reemplazando los trabajos?

¿Cómo la IA y la automatización cambiarán el lugar de trabajo en el futuro, y qué efecto tendrá en la economía global?

¿El curso de Andrew Ng sobre aprendizaje automático está completamente relacionado con las matemáticas y las funciones?

¿Qué otras funciones, como la función sigmoidea, se utilizan en el aprendizaje automático?

¿En qué se diferencia la IA de la coincidencia de patrones básicamente?