Google werkt aan een nieuwe functie voor zijn mobiele berichten-app Allo waarmee iPhone-gebruikers stickers kunnen maken op basis van hun selfies. Gebruikmakend van neurale netwerken, machine learning en het werk van kunstenaars, zal de app virtuele avatars creëren die zijn aangepast aan de eigen opvallende look van de gebruiker, zei het bedrijf.
“Fotografie in de vorm van een selfie is een zeer directe vorm van expressie. Het komt met een aantal regels die worden begrensd door de realiteit, ”schreef Google. "Illustratie daarentegen stelt mensen in staat zichzelf te definiëren - het is warmer en minder beladen dan de realiteit."
De functie is vrij eenvoudig: je maakt gewoon een selfie en de app retourneert een automatisch gegenereerde geïllustreerde versie van jou. Je kunt je nieuwe sticker ook handmatig aanpassen met verschillende gezichtsfuncties en andere opties.
Wat maakt jou, jij?
In plaats van algoritmisch de kleuren, vormen en texturen in selfies te bepalen, maakt het systeem van Google gebruik van een geavanceerd algoritme dat kwalitatieve kenmerken van iemands gezicht kiest op een manier die vergelijkbaar is met de manier waarop mensen dat doen.
“Hoewel we een groot convolutioneel neuraal netwerk vanaf nul hadden kunnen trainen om dit te bereiken, vroegen we ons af of er een efficiëntere manier was om resultaten te krijgen, omdat we verwachtten dat het leren interpreteren van een gezicht in een illustratie een zeer iteratief proces zou zijn .”
Google speelde met zijn bestaande meer algemene neurale netwerken voor computervisie en ontdekte dat een paar neuronen in deze netwerken goed waren in het focussen op dingen waar ze niet expliciet op waren getraind.
Het bedrijf legt uit:
Omdat ze grote neurale netwerken voor algemene doeleinden waren, hadden ze al ontdekt hoe ze dingen die ze niet nodig hadden, konden abstraheren.
Het enige dat nog te doen was, was om een veel kleiner aantal door mensen gelabelde voorbeelden te geven om de classificatoren te leren de kwaliteiten te isoleren die het neurale netwerk al wist over het beeld.
Ze voedden de neurale netwerkillustraties gemaakt door een artistiek team dat een breed scala aan gelaatstrekken vastlegde, zoals verschillende kapsels, huidtinten en neusvormen. Menselijke curatoren hebben vervolgens het netwerk getraind om de juiste illustratie aan de juiste selfie te koppelen.
Het onderzoeksteam van Google heeft speciale zorg besteed om ervoor te zorgen dat de illustraties een verscheidenheid van ras, leeftijd, mannelijkheid, vrouwelijkheid en androgynie omvatten. Bovendien werken ze met een scala aan artistieke stemmen, omdat "het niet genoeg is om een avatar te maken die een letterlijke weergave is van jezelf wanneer er veel versies van jou zijn."
De functie begon vandaag in Allo voor Android uit te rollen en komt binnenkort bij Allo op iOS.
De meest recente update voor Allo voor iOS omvatte incognito-chats voor groepsgesprekken en nieuwe meldingsinstellingen voor het selectief in- en uitschakelen van individuele meldingen.
Google Allo is een gratis download van de App Store.