eBay's HeadGaze-technologie reageert op hoofdbewegingen met behulp van de TrueDepth-camera van Apple

eBay heeft een nieuwe open source-technologie aangekondigd die het voor mensen met motorische beperkingen gemakkelijker zou kunnen maken om te winkelen of apps te verplaatsen. HeadGaze maakt gebruik van de TrueDepth-camera van Apple naast Apple ARKit om u in staat te stellen een app te navigeren met uw hoofdbeweging.

HeadGaze is gemaakt als onderdeel van een stageproject op eBay en omvat een virtuele stylus die de beweging van je hoofd volgt (omhoog, omlaag, van links naar rechts) en de 3D-informatie van het hoofd van ARKit neemt en 3D-geometriemapping toepast om de locatie van de "cursor" op het scherm.

Vanaf hier detecteren interface-widgets en reageren ze op de interactie 'cursor'. Vergelijkbaar met hoe een muis de cursor op een bureaublad navigeert, kunt u met het ontwerp met uw hoofd naar elke locatie op het scherm wijzen en de aangewezen "knoppen" activeren.

Kijk eens:

Muratcan Cicek, eBay Intern en Ph.D. Kandidaat aan de Universiteit van Californië, Santa Cruz legt uit:

Met HeadGaze kunt u scrollen en communiceren op uw telefoon met slechts subtiele hoofdbewegingen. Denk aan alle manieren waarop dit tot leven zou kunnen worden gebracht. Ben je het zat om tijdens het koken met je vette vingers door een recept op je telefoonscherm te willen bladeren? Te rommelig om de handleiding op uw mobiele telefoon te volgen terwijl u knutselt met de motor van een auto onder de motorkap? Te koud om je handschoenen uit te doen om je telefoon te gebruiken?

HeadGaze klinkt als een spannend project en omdat het open source is, kan iedereen het beginnen te gebruiken. De software is beschikbaar via GitHub.com. Sterker nog, het aantal Apple-apparaten met een TrueDepth-camera zal naar verwachting de komende dagen aanzienlijk toenemen. Nu alleen beschikbaar op de iPhone X, worden TrueDepth en Face ID naar verwachting uitgebreid naar drie nieuwe iPhones en twee nieuwe iPad Pro-tablets.

U kunt meer lezen over HeadGaze op deze link.