Según The Verge, Nintendo ha registrado en la comisión federal de telecomunicaciones estadounidense, la FCC, un dispositivo que utiliza tecnología mmWave a 24 GHz. Todo ello ha dejado a más de uno confundió. ¿De qué se trata y cómo la podrían aplicar los creadores de Super Mario a sus juegos?
Pensamiento lateral con tecnología probada
Para entender la filosofía de Nintendo hemos de pensar lateralmente, es decir, buscar nuevas formas de uso a la tecnología para crear nuevos productos. El ejemplo más claro y famoso fueron las Game and Watch que se basaban en la tecnología de las calculadoras de bolsillo, pero aplicada de otra manera.
Otro ejemplo son los acelerómetros, en la industria del automóvil se usaban para mejorar el rendimiento y la seguridad de los coches. Por ejemplo, el sistema de control de los airbags se basaba en el uso de acelerómetros. No obstante, Nintendo los uso para la creación del Wii Remote.
Por lo que de cara a la aplicación de la tecnología mmWave a 24 GHz deberíamos esperar una aplicación similar por parte de Nintendo en lo que podría ser su nueva consola, la cual será la sucesora de la actual Nintendo Switch.
¿Qué es la tecnología mmWave a 24 GHz?
Ni más ni menos que un radar de corto alcance, el cual utiliza a día de hoy en el mundo de la supervisión y la vigilancia, así como para los asistentes al estacionamiento de los vehículos. La particularidad de la tecnologia mmWave es que puede mapear el entorno que tiene alrededor a gran velocidad sin necesidad de una cámara, por lo que no requiere la captura y el procesamiento de la imagen posterior para interpretar el entorno que rodea el dispositivo.
Sin embargo, la única imagen de referencia que ha dejado Nintendo en su registro en la FCC no es que nos diga gran cosa. Por suerte, sí que nos han dicho que tecnología se trata, por lo que podemos deducir a partir de ello y sacar una serie de conclusiones, las cuales, os avisamos que no son pocas, pero tampoco del agrado de todo el mundo.
¿Su utilidad fuera de los videojuegos?
Al igual que las tecnologías utilizadas en su día para la Game and Watch y el Wii Remote en este caso estamos ante una tecnología ya probada fuera de los videojuegos en el mundo real. Y se puede decir que tienen varias utilidades:
- Los radares mmWave se utilizan para mapear el entorno en 3D y detectar obstáculos, peatones, y otros vehículos.
- En el caso de los robots autónomos, como drones automatizados, esta se usa para evitar obstáculos.
- Los radares de ondas milimétricas pueden generar mapas 3D de áreas para detectar intrusiones, monitorear movimientos y asegurar perímetros en áreas con nula iluminación.
- Se usan en la medicina para monitorizar la respiración de los pacientes o si alguno de ellos ha tenido una caída repentina en un hospital.
Es decir, en vez de usar la imagen de varias cámaras para generar el entorno 3D, el mmWave es un radar de precisión milimétrica que realiza la misma función. Además, puede hacerlo con la suficiente velocidad como para captar cambios constantes, por lo que puede servir para la captación de movimientos sin mandos de ningún tipo, al estilo Kinect, pero también sin cámaras. Algo que tendría sentido para una Nintendo preocupada por la seguridad de los menores.
¿Cómo se aplica la tecnologia mmWave a 24 GHz en una consola?
Ahora vamos a ir a lo interesante, a aplicar el pensamiento lateral sobre la tecnología mmWave para sacar ideas de cara a los videojuegos. Muchos estaréis pensando ya con la descripción anterior en algo como el Kinect, y a más de uno solo con pensarlo ya le han llegado sudores fríos y taquicardias. No obstante, se trata de una tecnologia mucho mejor y más avanzada.
Pensad en el Kinect como una versión primitiva y poco eficiente, ya que la tecnologia mmWave no solo permite detectar gestos sin cámaras, sino que permite hacerlo con menos latencia y con mayor libertad de movimiento. Además, es posible aplicarlo no solo en una consola de sobremesa, sino también en una portátil, dado que los sensores mmWave permiten a los jugadores controlar la consola sin tocar la pantalla o botones físicos. Gestos como deslizar la mano, pellizcar el aire, o inclinar el dispositivo podrían usarse para navegar por menús, interactuar con objetos del juego o realizar movimientos precisos.
La idea es la de suprimir la pulsación de botones por gestos que son más intuitivos, no es nueva, la vimos con el Wii Remote, y es un área en la que Nintendo estuvo trabajando en el pasado.
Nintendo lo lleva años investigando y desarrollando
Uno de los errores conceptuales es pensar que el hecho de que la actual consola de Nintendo sea algo más tradicional y no aplique ciertas tecnologías, significan que los de Kyoto dejaron de investigarlas. Simple y llanamente estas no eran lo suficientemente buenas para lo que querían. El caso es que, en 2015, ya patentaron la idea de usar gestos en una consola portátil, pero, obviamente, haciendo uso de cámaras, que era la tecnologia predominante hace 9 años.
Más bien en Switch no se aplicó por no ser lo suficientemente buena o por tema de costes. Pero esto siempre ha estado ahí, y la prueba de ello la tenemos en el lanzamiento de juegos como Nintendo Switch Sports, el cual es una evolución a Wii Sports o Ring Fit Adventures, que no deja de seguir el concepto del Wii Fit. Claro está que la gran ventaja añadida para Nintendo es que con la tecnología mmWave no hay cámaras ni micrófonos para realizar dicha función, lo que le permite a Nintendo vender la tecnologia de forma familiar sin que los usuarios se sientan monitorizados y le quita el acceso a personas con intenciones perversas.
La otra parte de la ecuación: NVIDIA y sus Tensor Core
El SoC principal de la sucesora de Switch está desarrollado por NVIDIA y deriva de los chips usados en el mundo de los vehículos autónomos y la robótica. Es más, una de las aplicaciones de los llamados Tensor Cores no es solo el DLSS, sino la visión por computador, aunque en el caso de los dispositivos mmWave no hay una cámara por el medio. Para el sistema a la hora de interpretar el entorno no son más que una serie de datos a interpretar.
Los Tensor Cores tienen una capacidad cálculo para convoluciones y matrices que es casi una orden de magnitud más grande que el uso de las unidades SIMD convencionales. Al acelerar los cálculos, estas unidades pueden ayudar a reducir la latencia en tiempo real, lo que es ideal en entornos que requieren una respuesta inmediata como los videojuegos. Dicho de otra manera, esto evita los problemas de rendimiento que tenía el Kinect, no solo por la particularidad de la tecnología mmWave de tener una latencia menor que las cámaras, sino por la capacidad de cálculo añadida.
Además, con el Deep Learning es posible entrenar al sistema para que detecte cada vez mejor los gestos del usuario, no se trataría de una tecnología estancada en sus limitaciones como lo fue el controlador de, sino que iría mejorando con el tiempo.
La otra utilidad de la tecnología mmWave: el streaming
En la patente de SwitchDS, nos deja claro que ambas mitades se pueden separar y enviarse datos entre sí. Explicamos que esto permitiría un uso al estilo Wii U con una parte de la consola conectada al televisor a través de un Dock, también podría servir para colocar la parte superior de pie y usar la inferior como mando de control para jugar. Ahora bien, os estaréis preguntando, ¿para qué sirve la tecnología mmWave para ello?
En este caso no hablamos de la tecnología como radar 3D, sino para transferir grandes volúmenes de información en un espacio reducido. Dicho de otra forma, los dispositivos mmWave pueden transmitir datos a velocidades adecuadas para enviar vídeo a alta definición e incluso 4K desde la consola a una terminal (mando con pantalla) con una latencia casi imperceptible. Además, al operar en una banda menos congestionada como la de 24 GHz, la interferencia con otros dispositivos de red (Wi-Fi, Bluetooth) es mínima.
Esto permitiría que los videojuegos que usaran doble pantalla podrían aplicarse no solo en modo portátil sin problemas, sino también en modo sobremesa, en alta definición y de una forma mucho mejor que Wii U y con las ventajas que tiene que la sucesora de Switch, que al igual que está será totalmente portátil.
No solo eso, sino que también sirve para la realidad virtual
No sabemos si Nintendo apostará por la realidad virtual, dado el poco éxito de la misma, todo nos hace pensar que las posibilidades son remotas. Además, esto significaría vender el resto del casco donde iría acoplada la unidad principal de la consola para tener el HMD completo. Teniendo en cuenta que la consola en modo portátil tendrá una potencia gráfica en torno a la de PS4, podemos esperar una experiencia visual similar al del PSVR, por lo que en calidad de imagen sería mucho peor que otras soluciones como las Meta Quest pese a ganar libertad de movimientos respecto a la realidad virtual de Sony.
Sin embargo, todos somos conscientes que hay ciertos videojuegos de Nintendo que beneficiarían mucho a la realidad virtual y a día de hoy es la única que puede motivar el uso de la VR en videojuegos tras el claro fracaso de PlayStation. A nivel visual, si bien sería una idea menos atractiva, se compensaría con una oferta jugable más atractiva y más accesible a nivel económico.
En cuanto a la aplicación de la tecnología mmWave esta no solo serviría para mapear el entorno, sino para poder interaccionar con el mismo sin necesidad de mandos de control ni cámaras por el medio. Claro está, que no tenemos referencias sobre el rendimiento de esta idea, por lo que lo seguimos diciendo, lo vemos como una posibilidad muy leve, y la que descartamos de entrada para la sucesora de Switch.
Conclusión
Con todo esto os podéis hacer una idea de que podría la tecnología mmWave a 24 GHz que Nintendo ha usado en el dispositivo que ha registrado en la FCC. Es probable que nos sorprendan con alguna aplicación que desconocemos, en todo caso, os hemos dejado algunas aplicaciones de la tecnología y solo nos falta esperar a ver que presenta Nintendo de cara a su futura consola de videojuegos.
