Samsung werkt aan standalone VR-headset met oog / hand-tracking en gezichtsuitdrukkingherkenning

Op het Mobile World Congress Shanghai vorige maand toonde Samsung een geheim standalone virtueel headsetprototype aan partners. Zoals opgemerkt in VR Focus, maakt het product gebruik van technologieën waarmee het oog- en handbewegingen kan volgen en verschillende gezichtsuitdrukkingen kan bepalen.

Het op het hoofd gemonteerde accessoire, genaamd Exynos VR III, is blijkbaar een opvolger van een ander prototype van een Samsung-headset, genaamd Exynos VR II, dat nooit officieel werd uitgebracht. Samsung biedt al een virtual reality-headset in de vorm van het Gear VR-apparaat, waarbij de gebruiker zijn smartphone moet dokken en loskoppelen wanneer hij deze gebruikt.

Dankzij Visual Camp, een VR-bedrijf dat eye-trackingtechnologie heeft ontwikkeld voor de geheime VR-headset, weten we dat het wordt aangedreven door een door Samsung ontworpen 10 nm hexa-core chip.

De chip bevat een paar Samsung M2 CPU-cores geklokt op 2,5 GHz, vier ARM Cortex-A53 CPU-cores geklokt op 1,7 GHz en ARM Mali G71 MP20-grafische kaart die twee ingebouwde 2.560 x 1.440 pixel-schermen kan aansturen op 90Hz of een enkel 4K extern scherm op 75Hz.

Zoals gezegd, in tegenstelling tot de huidige Gear VR-headset van Samsung die een smartphone nodig heeft om gegevens te verwerken en visueel weer te geven, bevat dit alles-in-één op het hoofd gemonteerde displayprototype alle technologie die nodig is om virtuele werelden en apps standalone te maken.

Het persbericht van Visual Camp waarin de Samsung-deal wordt aangekondigd, zegt dat de eye-trackingtechnologie VR-headsets energie laat besparen door delen van een scène weer te geven die de gebruiker momenteel met een zeer hoge resolutie bekijkt, terwijl alles in perifere visie in verminderde resolutie wordt weergegeven.

Deze techniek staat bekend als "foveated rendering".

"Verschillende andere technologieën zullen worden toegepast op de Exynos 3, in aanvulling op de eye-trackingtechnologie van het bedrijf, waaronder hand-tracking, spraakherkenning en gezichtsuitdrukkingherkenning," leest het persbericht.

Een meting van het CPU-stroomverbruik van de Exynos 8890-chip van Samsung Electronics resulteerde in het relatief lage gemiddelde cijfer van minder dan drie procent, zei Visual Camp.

Bedrijven als Apple, Google en Facebook doen ook onderzoek naar eye-trackingtechnologie.

Er wordt gezegd dat Apple werkt aan een digitale bril of een virtueel headsetproduct dat gebruik kan maken van optica door Duitse specialisten Carl Zeiss, waarvan wordt gedacht dat het in 2018 of 2019 wordt uitgebracht. De Cupertino-gigant heeft onlangs SensoMotoric Instruments gekocht voor een niet bekendgemaakte som.

SensoMotoric Instruments is een Duits bedrijf dat gespecialiseerd is in eye-tracking. Hun technologie maakt ook gebruik van vervroegde weergave, begrijpt gezichtsuitdrukkingen en herkent gebaren van deelnemers en externe gebeurtenissen.