A Sony parece estar trabalhando em uma solução para adicionar botões virtuais a controladores físicos usando um amálgama de tecnologia de rastreamento de dedos.
A Sony possivelmente está desenvolvendo uma solução para equipar controladores físicos com botões virtuais usando uma variedade de tecnologias e combinações delas. O conceito independente de hardware oferece alguns novos insights sobre o interesse contínuo da Sony em soluções de rastreamento de dedos .
A fabricante do PlayStation vem experimentando técnicas de detecção de movimento dos dedos há anos. Um recente aumento na atividade de patentes da Sony até sugeriu que o PS VR2 poderia suportar rastreamento de dedos , mas isso não aconteceu. No final de 2023, a empresa ainda não comercializava nenhuma solução desse tipo.
E, no entanto, os seus esforços de investigação e desenvolvimento nesta frente continuam até hoje, como sugerido por uma patente recentemente obtida que descreve uma forma de alargar as capacidades do controlador físico utilizando o rastreamento de mãos e dedos, a fim de alcançar a funcionalidade de botões virtuais. Especificamente, a Sony patenteou uma abordagem multimodal para rastrear o pressionamento de botões virtuais que pode aproveitar tudo, desde receptores e microfones sem fio até câmeras de smartphones e unidades de medição inercial, dispositivos que rastreiam propriedades do corpo, como força e taxa angular de rotação.
Métodos patenteados de rastreamento de botões virtuais da Sony
- Analisando o feed de vídeo de uma câmera de um telefone, console ou webcam.
- Analisando dados do sensor de distância.
- Análise de dados da unidade de medição inercial (IMU).
- Analisando dados do sensor de pressão.
- Analisando dados sonoros.
- Analisando sinais de Wi-Fi, dados de Bluetooth ou ambos.
Várias implementações descritas na patente recém-surgida incorporam uma análise de informações de estado do canal (CSI) para detectar gestos grandes e sutis. Ao rastrear variações de amplitude de pacotes de dados Wi-Fi ou Bluetooth trocados entre um transmissor e um receptor, que pode ser qualquer coisa, desde um controlador a um smartphone, a Sony acredita que pode detectar com precisão ações como acenar, digitar em um teclado e pressionar um ponto específico. em um gamepad, todos com pegadas CSI distintas.
Fiel ao interesse de longa data da Sony no aprendizado de máquina , a patente recém-surgida descreve uma série de implementações que aproveitariam um modelo de IA para interpretar de forma inteligente os dados do sensor. No entanto, a empresa acredita que mesmo uma análise rudimentar de coisas como sinais Wi-Fi e feeds de câmeras poderia ser usada para obter a funcionalidade dos botões virtuais. Uma dessas soluções descreve um smartphone montado em um controlador que simplesmente registra os movimentos dos dedos do usuário e depois os traduz em pressionamentos de botões.
A tecnologia de botão virtual da Sony é super ampla, mesmo para os padrões de patentes
A solução geral é extremamente ampla, mesmo para os padrões de patentes. A natureza genérica da mais recente patente da Sony sugere que é improvável que a sua tecnologia subjacente seja comercializada na sua totalidade, uma vez que algumas das suas implementações descritas serão mais viáveis do ponto de vista prático do que outras. No entanto, a única existência deste registo de IP indica que a Sony ainda está a explorar muito a ideia de adicionar o rastreio digital aos seus produtos eletrónicos. O tempo dirá se este esforço contínuo de P&D resultará em uma nova versão do DualSense ou em uma categoria completamente nova de acessórios para jogos.