¿Qué impacta más a una experiencia de teléfono inteligente generalmente sin demoras, es el procesador o la RAM?

Ambos.
Para una experiencia sin demoras, barata y duradera, sugeriría un quad core, 1Gb RAM, pantalla de 480p, pero eventualmente depende de las capacidades gráficas del Sistema en un Chip, que no se especifican en ninguna parte, excepto en las hojas de datos.
La resolución de pantalla también hace la diferencia, ya que se necesita renderizar más píxeles.

Los procesadores móviles de hoy en día son mejores en gráficos que en el procesamiento de datos sin procesar, por lo que las métricas como la velocidad del reloj son cada vez menos significativas.

Para abrir aplicaciones rápidamente, un flash eMMC, a menudo llamado flash interno, es 2-3 veces más rápido que una tarjeta SD, por lo que es deseable un gran tamaño de memoria flash. Los teléfonos más recientes tienen por defecto un flash más rápido que los teléfonos anteriores, por lo que los teléfonos antiguos pueden parecer lentos en comparación con los nuevos, incluso si tienen la misma RAM / CPU o una similar.

Android gestiona la RAM bastante bien, y las aplicaciones utilizan el exceso de RAM como caché.
Una RAM más alta es necesaria solo si necesita mantener activos los procesos en segundo plano, como aplicaciones de mensajería, servidores, máquinas virtuales y otras aplicaciones similares que usan más RAM en los escritorios.

La CPU puede ser más útil en el procesamiento multimedia, como videos de alta resolución, lapsos de tiempo de representación o juegos en 3D.

Déjame contarte la realidad.
Después de una configuración mínima de hardware, es solo el software el que afecta el rendimiento diario de un teléfono.

La cantidad mínima de memoria RAM que debe tener un teléfono en 2015 es de 2 GB. Nada más importa. El rendimiento de la CPU incluso el Snapdragon 200 de bajo rango está bien para el uso diario.

Es un equilibrio de los dos. 4 GB de RAM y un procesador de basura no funcionarán mejor que un teléfono con un gran procesador y 512 MB de RAM. Busque en línea los puntos de referencia, estos le darán la mejor imagen del rendimiento general.