¿Cómo son relevantes los proyectos como Apache Spark para la inteligencia artificial?

No lo creo. Las arquitecturas totalmente deterministas de alto rendimiento pertenecen firmemente a la informática. La IA no es determinista. Su paralelismo es asociar las respuestas a las entradas (pero no de manera exclusiva) utilizando criterios ambientales para la convergencia (retroalimentación ambiental). La memoria no es determinista, por lo que no se garantiza que el direccionamiento produzca una respuesta coherente. En pocas palabras: las computadoras no son apropiadas para la IA “real” (la inteligencia artificial real es un oxímoron, pero la inteligencia real no significa nada (así como la forma artificial tampoco significa nada) y necesito una referencia a una “disciplina” mal conocida como IA) . Para el paralelismo de la inteligencia artificial, piense en cientos de procesos casi independientes que dejan suficientes efectos secundarios para manejar asuntos contextuales como la fusión de datos, la discriminación y la clasificación mientras emiten un control justo a tiempo.