Vingerverven en 3D-beeldhouwen in augmented reality met ARKit

Veel iDownloadBlog-lezers hielden erg van de voedselbesteldemo van gisteren die virtuele voedingsmiddelen op een bord weergeeft, dus we hebben nog een nieuwe use case voor het nieuwe ARKit-raamwerk van Apple: vingerverven en 3D-objecten beeldhouwen door augmented reality.

Ontwikkelaar Fabin Rasheed heeft een app met de naam Maker Studio samengesteld waarmee u 3D-objecten met uw vinger of Apple Pencil op een iPad Pro kunt beeldhouwen en schilderen, allemaal in augmented reality.

Als u wilt, kunt u zich aanmelden voor de bèta en updates via de officiële website.

"Dit is mijn recente onderzoek naar beeldhouwen en schilderen met ARKit", schreef hij. "Het was een schoonheid om Apple Pencil te gebruiken voor beeldhouwen en schilderen en ARKit gaf er perspectief aan."

Ik weet niet zeker hoe praktisch 3D-modellering in augmented reality is, maar de demo ziet er zeker leuk uit.

Een 3D-kunstenaar zou een volledig ARKit-model en schilderplatform kunnen gebruiken om zo ongeveer alles te visualiseren. Architecten konden eenvoudig uitbreidingen voor bestaande gebouwen modelleren, ontwerpers konden virtuele modellen in hun nieuwste outfits kleden enzovoort.

Een andere demo komt via ontwikkelaar Osama Abdel-Karim, die zijn app bouwde met een combinatie van ARKit- en Vision-frameworks van iOS 11 om het vingerverfeffect te creëren.

Volgens Osama:

Een van de coole bibliotheken die Apple in iOS 11 heeft geïntroduceerd, is Vision Framework. Het biedt een aantal computer vision-technieken op een behoorlijk handige en efficiënte manier. In het bijzonder gaan we de objectvolgtechniek gebruiken.

Object volgen werkt als volgt: Eerst geven we het een afbeelding en coördinaten van een vierkant binnen de afbeeldingsgrenzen voor het object dat we willen volgen. Daarna roepen we een functie aan om het volgen te initialiseren. Ten slotte voeren we een nieuw beeld in waarin de positie van dat object is gewijzigd en het analyseresultaat van de vorige bewerking.

Daarom zal het de nieuwe locatie van het object voor ons retourneren.

Apple zal hoogstwaarschijnlijk ARKit-aangedreven apps in een speciaal gedeelte in de App Store plaatsen.

Het bedrijf heeft gezegd dat voor ARKit-apps een iPhone of iPad met de A9-, A10- of latere processor vereist is, wat betekent dat eigenaren van iPhone 6, iPad Air 2 en oudere apparaten in de kou worden gelaten.