A Sony está explorando uma tecnologia que permitiria rastrear o olhar do jogador mesmo sem um fone de ouvido de realidade virtual. De acordo com seus mais recentes registros de patentes, a empresa recentemente experimentou uma solução de renderização de exibição heads-up que coloca elementos HUD ao redor da tela de maneira dinâmica, com base em onde o jogador está olhando.
A ideia de usar o rastreamento de olhar para informar o posicionamento do HUD é algo que a Sony vem pesquisando desde pelo menos o ciclo de desenvolvimento do PlayStation VR2. A solução foi inicialmente explorada como uma extensão da renderização foveated, uma técnica de imagem alimentada por aprendizado de máquina que permite que os fones de ouvido VR conservem recursos renderizando apenas texturas de alta definição em áreas específicas da tela nas quais os jogadores estão focando. De acordo com outro pedido de patente recentemente divulgado, o PSVR 2 pode apresentar esse aprimoramento de imagem específico .
No início deste ano, a Sony entrou com um pedido de patente para o posicionamento automático do HUD com base no rastreamento do olhar. Em vez de um headset VR, a solução experimental usaria uma única câmera para rastrear o que o jogador está vendo. Em seguida, analisaria essas informações com um modelo de aprendizado de máquina especializado para renderizar uma visualização personalizada de um ambiente virtual que conteria apenas elementos HUD em áreas que o jogador estivesse inspecionando ativamente. O arquivamento não se aprofunda em nenhuma característica técnica da câmera usada para a solução de rastreamento de olhar que descreve, embora mencione que a implementação dependeria do movimento da cabeça e da biometria, como detecção de olhos, para medições precisas. Para contextualizar, a câmera PS5 HD é capaz de ambos.
Esta é a segunda patente para um mecanismo de posicionamento HUD baseado em rastreamento de olhar que a Sony registrou no ano passado. O arquivamento inicial descreveu uma solução somente VR, embora ambas as tecnologias busquem principalmente oferecer experiências de jogo mais responsivas e personalizadas.
As ambições da Sony de personalizar os jogos vão além da renderização dinâmica do HUD. De acordo com uma patente diferente descoberta durante o verão, a empresa também está pesquisando um sistema de IA que pode modificar o conteúdo do jogo com base nas informações do olhar do jogador em tempo real.
Não está claro se a Sony já fez um protótipo da solução de posicionamento automático de HUD descrita em sua última patente. O arquivamento em si também não garante que essa tecnologia seja comercializada. No entanto, reafirma que a Sony ainda está buscando ativamente a inovação em jogos na esfera de rastreamento ocular, mesmo além da VR, que continua sendo um segmento de nicho de mercado devido ao alto custo de entrada e à falta geral de títulos AAA atraentes, entre outros motivos. Como a data de lançamento do PlayStation VR2 está a apenas alguns meses, mais detalhes sobre os aprimoramentos de jogos baseados em olhar da Sony podem surgir em breve.