Apple onderzoekt oplossingen voor eye tracking voor zijn geruchten augmented reality headset

Naar verluidt werkt Apple aan een geavanceerde headset met augmented reality. De nieuwste patentaanvraag biedt een glimp van hoe nauwkeurig en betrouwbaar bliktracering gebruikers in staat zou kunnen stellen om gemakkelijker met een computer gegenereerde omgeving te communiceren dan met handen.

Dinsdag gepubliceerd, verleende het Amerikaanse Patent and Trademark Office Apple een patent voor een "Elektronisch apparaat met blikvolgsysteem", bedoeld om het driftprobleem op te lossen met behulp van waarschijnlijkheid en scènedetectie.

Wat is het probleem van de drift, vraag je.

AppleInsider heeft daar meer over:

Eye-tracking kan een alternatieve manier zijn voor gebruikers om te communiceren met een virtual reality-omgeving, door te detecteren waar de gebruiker specifiek op focust in de schermen van de headset. Dit zou een natuurlijkere en nauwkeurigere interactie met een menu of ander softwaresysteem kunnen bieden dan het gebruik van handen, omdat er minder onhandigheid is dan het grijpen en selecteren van een virtueel object in de echte ruimte.

Oogvolging is echter beperkt in zijn nauwkeurigheid omdat de headset van de gebruiker constant in beweging is. Hoewel bevestigd aan het hoofd van de gebruiker, zal de headset nog steeds bewegen, waarbij de afstand tussen de ogen van de gebruiker en het oogvolgsysteem voortdurend varieert, waardoor de effectiviteit minimaal is.

Het patent van Apple stelt het gebruik voor van een softwaresysteem met een gevestigd oogvolgsysteem om de mogelijkheid om items te selecteren te verbeteren. Het systeem zou profiteren van een 'saliency map', die wordt beschreven als een waarschijnlijkheidsdichtheidskaart voor inhoud die op het display wordt weergegeven, om interactieve elementen in het gezichtsveld van de gebruiker te identificeren, zoals selecteerbare knoppen en tekst.

"Bij normaal gebruik, als een gebruiker iets wil selecteren, kan de blikdetectie bepalen waar de gebruiker naar kijkt, en met behulp van de saliency map raden naar wat ze specifiek bekijken, met een aparte controller die wordt gebruikt om de selectie te bevestigen, "Verklaart AppleInsider.

Uit de indiening:

Gebruikersinvoer, zoals muisklikken, spraakopdrachten en andere opdrachten, kunnen door de besturingsschakelingen worden gebruikt om te identificeren wanneer een gebruiker naar bepaalde items in de weergegeven inhoud staart. Informatie over het werkelijke blikpunt van de gebruiker op het scherm dat wordt afgeleid met behulp van de saliency map-informatie en gebruikersinvoer kan worden vergeleken met gemeten oogpositie-informatie van het blikvolgsysteem om het blikvolgsysteem te kalibreren tijdens normaal gebruik van het elektronische apparaat.

Bedrijven als Apple registreren vaak wekelijks talloze patenten, maar de meeste aanvragen worden gedaan als verdedigende actie. Met andere woorden, er zijn absoluut geen garanties dat een van de gerapporteerde patenten echte producten zal maken. Met dat in gedachten bieden deze aanmeldingen een interessante kijk op de onderzoeks- en ontwikkelingsinspanningen van Apple.

Apple heeft in 2017 een Duits bedrijf SensoMotoric Instruments overgenomen, dat gespecialiseerd is in eye-trackingtechnologie.

Afbeelding: een Apple augmenter reality headset-concept van 3D-kunstenaar Antonio De Rosa