Met Real Tone wil Pixel 6 je portretten verbeteren, ongeacht je huidskleur

Het is logisch dat telefoonfabrikanten extra aandacht besteden aan de manier waarop gezichten op foto's verschijnen de nieuwe Pixel 6, vandaag aangekondigd door Google, introduceert een reeks nieuwe AI-aangedreven tools om mensen beter dan ooit te laten verschijnen. De twee hoogtepunten zijn Face Unblur (die onscherpte op bewegende gezichten helpt verminderen) en Real Tone. Dit laatste is een soort nabewerkingsmagie op basis van AI – mogelijk gemaakt door De gloednieuwe Tensor-chip van Google – met als doel gezichten met alle huidtinten zo goed mogelijk te laten verschijnen.

Of je nu selfies of iemand anders maakt, de overgrote meerderheid van de foto's die met een smartphone worden gemaakt, zijn van mensen. Traditioneel was het extreem moeilijk om de belichting er goed uit te laten zien voor foto's waarop meerdere gezichten op de foto voorkomen, vooral als de gezichten allemaal verschillende huidtinten hebben. De nieuwe Pixel 6 voegt een laag computationele fotografie toe aan de mix om ervoor te zorgen dat iedereen die op de foto verschijnt er zo goed mogelijk uitziet. Het Pixel-team werkte samen met een diverse groep deskundige beeldmakers en fotografen om de witbalans, belichting en algoritmen af ​​te stemmen. Ze beweren dat dit ervoor zorgt dat de foto's voor iedereen, van elke huidskleur, werken.

Google benadrukt dat het Real Tone als een missie en een verbetering van zijn camerasystemen ziet, in plaats van een sluitende oplossing voor de uitdagingen waarmee fotografen worden geconfronteerd. Het bedrijf heeft aanzienlijke middelen geïnvesteerd om ervoor te zorgen dat alle mensen – en vooral gekleurde mensen – beter vertegenwoordigd zijn in de manier waarop camera’s hun gezichten vastleggen.

“Mijn moeder is een zwarte vrouw met een donkere huidskleur, mijn vader is een blanke Duitser. Mijn hele leven is er een vraag geweest: hoe krijgen we één foto waarop iedereen er goed uitziet”, zegt Florian Koenigsberger, productmarketingmanager Advanced Photography voor het Android-team, in een briefinginterview voorafgaand aan de release van de nieuwe telefoons. “De nieuwe camera is een stap op de weg. De diversiteitscijfers van Google zijn geen mysterie voor de wereld, en we wisten dat we zeker enkele tekortkomingen hadden op het gebied van geleefde ervaring en wie hier op authentieke wijze over kon spreken.”

Het camerateam werkte samen met fotografen, coloristen, cinematografen, directeuren fotografie en regisseurs om een ​​beter inzicht te krijgen in de uitdagingen op het gebied van belichting en het vastleggen van een gevarieerde reeks huidtinten - en in het bijzonder mensen met donkere huidtinten. Het team maakte onder meer gebruik van de ervaring van een breed spectrum aan professionals, waaronder de directeur fotografie van Insecure Ava Berkofsky, fotograaf Jozua Kissi, en cameraman Kira Kelly. 

“We concentreerden ons op het brengen van deze zeer diverse reeks perspectieven, niet alleen in termen van etniciteit en huidtinten, maar ook op het gebied van een verscheidenheid aan praktijken”, aldus Koenigsberger. "De coloristen waren eigenlijk enkele van de meest interessante mensen om mee te praten, omdat ze dit beschouwen als een wetenschap die plaatsvindt tijdens het maken van beelden."

Het Google-productteam werkte samen met deze beeldexperts om ze camera's te geven en daagde ze uit om extreem uitdagende beeldsituaties vast te leggen, waaronder gemengde lichtbronnen, tegenlicht, interieurs, meerdere huidtinten in één beeld, enzovoort.

“We moesten leren waar dingen uit elkaar vallen, vooral voor deze gemeenschappen, en van daaruit kunnen we uitzoeken welke richting we van daaruit kunnen inslaan”, legt Koenigsberger uit. “De beeldvormingsprofessionals waren heel openhartig en stonden direct in de kamer met onze technici. Ik hielp deze gesprekken faciliteren, en het was fascinerend om niet alleen de technische lessen te zien, maar ook de culturele lessen die in deze ruimte plaatsvonden. Ik heb het over asheid, donkere huidtinten, texturen. De nuances voor middentonen kunnen variëren.”

Het proces begint met de gezichtsdetectie-algoritmen van de camera. Zodra de camera weet dat hij naar een gezicht kijkt, kan hij gaan uitzoeken hoe hij de afbeelding op een manier kan weergeven die goed werkt. Bij het testen op verschillende apparaten ontdekte het team van Google dat de Pixel 6 consistent beter presteerde dan die van concurrerende fabrikanten, en zelfs de Pixel-telefoons van de oudere generatie.

Het is niet meteen duidelijk hoe de functie in de praktijk werkt, en of er globale bewerkingen plaatsvinden (dwz hetzelfde filter wordt toegepast op de hele afbeelding), of dat de AI individuele gezichten bewerkt als onderdeel van de bewerkingsronde. We hopen binnenkort dieper in te gaan op dit specifieke aspect van de camerafunctionaliteit om te zien hoe het in de praktijk werkt.

Het camerateam benadrukt dat het werk dat op dit gebied is verricht betekent dat de trainingssets voor het maken van de camera-algoritmen een factor 25 diverser zijn geworden. De Real Tone-functie is een kernonderdeel van de camera-algoritmen en kan niet worden uitgeschakeld of uitgeschakeld. gehandicapt.

Bron: https://techcrunch.com/2021/10/19/pixel-6-real-tone/