Como funciona um controlador VR?

Depende do controlador:

HTC Vive e Oculus "Touch" ambos dependem de duas câmaras infravermelhas que enviam sinais e os recebem de volta, o que permite a mais precisa tecnologia de rastreamento disponível no mercado por enquanto. [1][2]

No entanto, os controladores Playstation VR dependem de tecnologia mais antiga (aproximadamente 5 anos mais antiga, o que parece ser muito tempo pelos padrões de hoje)[3]. Tecnicamente, a câmera PSVR rastreia os LEDs de luz visível iluminados na ponta dos controladores "Move". O que significa que ela usa a mesma luz que nós humanos vemos.

Mas, enquanto todos os controladores atuais dependem de sinais de luz visível ou invisível para funcionar, tem havido algumas outras tecnologias nos últimos anos. O mais notável é o rastreamento magnético usado pela Razer Hydra [4] do Sixense, que permite o rastreamento "transparente". What that means is “modern” light-based controllers cannot be tracked when the light signal is broken (when controllers are hidden from the sight of the cameras), while magnetic-based controllers would need no “visual contact”, thus working fine in any possible position.

Footnotes

[1] Exploring the magic behind the HTC Vive controller[2] Oculus Touch Hands-On: So Damn Good[3] PlayStation VR’s weakness is the Move controller[4] Razer Hydra - Wikipedia