Er zijn talloze nieuwe functies om van te profiteren in iOS 11, maar veel ervan liggen onder de motorkap in de vorm van API's en vereisen App Store-apps om het volledige effect te krijgen.
Iryss is een nieuwe app ontwikkeld door Florian Hebrard, beter bekend bij de jailbreak-gemeenschap als Ziph0n, die gebruik maakt van de gloednieuwe CoreML (Machine Learning) API van Apple om objecten om u heen in realtime te herkennen.
Iryss gebruiken is net zo eenvoudig als je camera ergens op richten. Binnen enkele milliseconden raadt de app wat het object in het frame is door middel van tekst op het scherm. Als alternatief kunt u de app configureren om objectdetecties hardop aan te kondigen.
Iryss kan zowel levende als levenloze objecten herkennen. In het geval van dieren is de app slim genoeg om onderscheid te maken tussen veel voorkomende rassen of soorten.
Er zijn een aantal instellingen die u kunt configureren in de Iryss-app om deze te laten werken zoals u wilt:
Hier kunt u de app dwingen om aan te kondigen wat het hardop detecteert in plaats van het alleen als tekst weer te geven, en u kunt ook haptische feedback inschakelen om een succesvolle objectidentificatie aan te geven. Omdat de app door advertenties wordt ondersteund, zul je in dit voorkeurenpaneel ook een in-app aankoop vinden om de advertenties uit te kopen.
Dus hoe goed werkt de app? Het is oké, maar niet perfect. Misschien vaker dan je misschien leuk vindt, zal de app een object ten onrechte identificeren als iets dat het niet is. Als een goed voorbeeld wordt deze kauwgomballenmachine gedetecteerd als een 'pilfles', waarschijnlijk vanwege de gekleurde stippen erin:
Een ding dat ik een aanzienlijke belemmering voor de functionaliteit van de app vond, is slechte fotografische omstandigheden. Om ervoor te zorgen dat u de meest nauwkeurige metingen krijgt, raad ik aan ervoor te zorgen dat u de best mogelijke lichtomstandigheden hebt en dat u ver genoeg weg bent van een object dat het hele ding in beeld is.
De ontwikkelaar vertelt me dat hoewel objectdetecties niet altijd goed kunnen zijn, het altijd kan worden verbeterd. Dankzij hoe eenvoudig Machine Learning het voor ontwikkelaars maakt om dergelijke apps te maken, moeten regelmatige updates van Iryss in staat zijn om de nauwkeurigheid ervan in de loop van de tijd te verbeteren.
Iryss lijkt op het eerste gezicht zeker gimmicky voor de meeste gebruikers, maar bovenal kan ik op zijn minst twee toepassingen bedenken in de echte wereld waar de app nuttig zou kunnen zijn, zoals:
- Als iemand moeilijk kan zien en de iPhone nodig heeft om voor hem te zien, kan Iryss spraakgestuurde aankondigingen doen om die persoon te vertellen wat er om hem heen is.
- Wanneer ouders het leren van objecten / namen voor hun kind op jonge leeftijd willen vergemakkelijken, kan het kind met Iryss spelen om te leren over de objecten om hen heen en hoe ze worden genoemd.
Voor andere gebruikers is Iryss eigenlijk gewoon een proof of concept-app waarmee je voor de lol kunt spelen.
Als je Iryss eens wilt proberen, is het een gratis download in de App Store. Het is een geweldige manier om te zien wat Machine Learning in staat is in iOS 11, en je kunt verwachten dat deze API in de toekomst vele andere ongelooflijke apps mogelijk zal maken.
Vind je het concept achter Iryss leuk? Deel uw mening in de reacties hieronder.
