¿Cómo se aplica la IA en Amazon Go?

Guau !!! Este es el sueño de la IA convertido en realidad que nos anima a soñar aún más.

El concepto es simple: entras en la tienda, eliges las cosas que necesitas, sales de la tienda y te vas. Amazon le envía el recibo y deduce el monto facturado de su cuenta.

Ok, entonces solo podemos adivinar lo que se está utilizando, incluso si lo patentaron (Solicitud de Patente de los Estados Unidos: 0150012396). Como ninguna compañía hace una revelación de su tecnología en sus patentes que se pueden replicar con éxito tal cual. Aquí hay un extracto:

[W] cuando el cliente pasa por la salida (área de transición) de la ubicación de venta minorista, los artículos seleccionados por el usuario pueden pasar automáticamente de la instalación de manejo de materiales al usuario y se le puede cobrar una tarifa por los artículos. … Por ejemplo, si el usuario está comprando artículos en una tienda minorista, en lugar de que el usuario tenga que detenerse y ‘pagar’ con un cajero, cajero o estación de cheques automatizada, porque los artículos seleccionados ya son conocidos e identificados en un identificador de artículo lista asociada con el usuario, el usuario puede simplemente salir de la ubicación de venta minorista con los artículos. Se detectará la salida del usuario y, a medida que el usuario pase a través de la salida (área de transición), al usuario, sin tener que detenerse ni retrasarse, se le cobrará automáticamente una tarifa por los artículos (los artículos se transfieren al usuario).

Supongo que la principal tecnología implementada es IoT (sensores y detectores RFID) e IA .

Aquí hay algunas formas en que la IA puede haber sido utilizada:

  1. Detección del cliente a través de la visión por computadora (CV) y extracción automática de los detalles de la cuenta del cliente. Los modelos de aprendizaje profundo deberían abordar esto.
  2. Seguimiento de los clientes a medida que se mueven por el piso minorista. De nuevo DL en video. (Opcional)
  3. Detectar un artículo que se ha eliminado del estante. IoT y puede ser CV debería hacer el trabajo.
  4. Ahora para la parte difícil: ¿Cómo averiguar qué artículo pertenece a qué cliente? Por ejemplo, el cliente A recoge el artículo B y se lo entrega al cliente C en el pasillo. Por lo tanto, el carrito de compras virtual C del cliente debe reflejar el artículo B. No creo que CV sea el martillo adecuado para este clavo, ya que el intercambio se puede hacer en el punto ciego de la cámara. Creo que la herramienta correcta aquí es RFID y detectores RFID en todo el espacio comercial (un mapa RFID de circuito cerrado, se puede decir). Esto es cierto solo si desea mostrar artículos en el carrito virtual del cliente en tiempo real. De lo contrario, solo tenga este mapa RFID en el área de salida (el área de “transición”). AI puede asociar la ubicación de un artículo específico con la ubicación del cliente según lo rastreado por AI, a menos que los clientes se encuentren con problemas en la tienda. Una regla simple contra la exhibición pública de afecto en la tienda o al salir debería resolver eso. Sin embargo, nadie quiere molestar a los clientes que pagan, por lo tanto, la solución existente debe permitir el escenario anterior.
  5. Por lo tanto, cada elemento tendrá una ubicación en el mapa RFID, y el movimiento de cada cliente es rastreado por la cámara y se le asigna una ubicación en el mapa RFID (ya que los clientes no pueden ser etiquetados con RFID). Entonces no necesita IA avanzada para determinar qué artículos pertenecen a qué cliente, un simple análisis de clúster hará el trabajo.
  6. Una vez que el cliente sale del mercado minorista, se genera la factura. Como se realiza un seguimiento de todo, el balance de la tienda debe coincidir en tiempo real. Es decir, los artículos que no están en el estante de la tienda deben ser iguales a los artículos en el carrito de compras virtual del cliente. Cuando los clientes salen, el saldo debe reflejarse nuevamente correctamente en el sistema. Si hay una discrepancia, se alertará inmediatamente a la seguridad minorista. Como en los bancos.
  7. Además, si mira el video, los clientes tendrán sus teléfonos inteligentes escaneados. Un cliente recibe una etiqueta con el número de teléfono. Esto debería reducir los falsos positivos. Aunque todavía tendremos preguntas sobre qué pasaría si decidiéramos cambiar nuestros teléfonos, etc. En este caso, supongo que es lo mismo que la responsabilidad del propietario del automóvil en caso de accidente, independientemente de quién conducía. Es decir, el propietario del teléfono y la cuenta termina pagando por las cosas recogidas por el titular del teléfono.

Como no era del todo inesperado, Amazon impulsó silenciosamente la innovación de IA mientras el mundo debatía sobre la IA. Sus acciones en Amazon están seguras durante bastante tiempo.