Inhoud

• Wat je ziet is wat je krijgt
• Dood het met leren
• Kijk naar de sterren

Als u op zoek bent naar een smartphone met een goede camera, heeft u zonder twijfel de Pixel-serie van Google op een lijst met aanbevelingen gezien. Jaar na jaar heeft Google ontdekt hoe een camera te maken die elke keer geweldige resultaten levert. Van de pixel-peeping tech blogger tot de dagelijkse consument, het is moeilijk om een ​​persoon te vinden die niet van de camera's van de Pixel houdt.

Behalve, Google probeert geen camera's te maken. Het probeert magie te maken.

Marc Levoy

Isaac Reynolds

Ik heb onlangs de gelegenheid gehad om te gaan zitten met Marc Levoy en Isaac Reynolds - de kern van de gedachte achter het frustrerend goede camerasysteem van de Pixel-serie. We hebben lange gesprekken gehad over de nieuwe functies in de camera van de Pixel 4, van de verbeterde Night Sight tot de WYSIWYG (What You See Is What You Get) realtime HDR + -zoeker. Er is veel technisch gepraat over hoe Google deze functies inschakelt, maar aan het einde werd één ding glashelder gemaakt. Bij de Pixel-camera van Google gaat het helemaal niet om een ​​camera te zijn.

"Onze kernfilosofie is het bouwen van een camera die magie doet, dat is die combinatie van eenvoud en beeldkwaliteit," legt Reynolds uit, "Dus Night Sight is er nog, standaard HDR + is er nog steeds. Alle verwerking die plaatsvindt onder de motorkap om een ​​geweldige foto te krijgen vanuit de standaardmodus, is er nog steeds. En we hebben ook veel meer vereenvoudiging gedaan. "

Standaard modus. Vereenvoudiging. Magie. Dit zijn zinnen die Google gebruikt als onderdeel van zijn kernfilosofie voor de camera van Pixel. In de gedachten van Levoy en Reynold hoeft het vastleggen van het moment niet te gaan over modusdraaiknoppen en instellingenmenu's.Google probeert geen camera in de telefoon te bouwen, het probeert iets te bouwen dat consistent geweldige beelden uit de poort maakt, met traditionele middelen of anderszins.

Wat je ziet is wat je krijgt

Een van de nieuwe functies van de Pixel 4 is de WYSIWYG-zoeker, wat betekent dat u de resultaten van HDR + ziet voordat u zelfs maar de opname maakt. Dit lijkt misschien een kleine functie, maar het maakt sommige dingen mogelijk die gewoon niet mogelijk zijn in niet-computergestuurde camera's.

Het doel van die WYSIWYG-zoeker is om gebruikersinteractie zoveel mogelijk te verminderen. Door het resulterende beeld meteen te laten zien wanneer je de camera opent, weet je of je direct een gelijkmatige belichting krijgt en kun je je gewoon concentreren op het maken van je foto.

"Als we zien dat de gebruiker heeft getikt, weten we dat de camera ze niet vanaf het begin heeft gegeven wat ze wilden." Gaat Reynolds verder, "Dus een tik is voor mij mogelijk een geval van mislukking dat we graag willen verbeteren .”

Traditionele camerasystemen zijn er vrij slecht in om het gewenste beeld rechtstreeks uit de camera te halen. U kunt ofwel blootstellen voor de hoogtepunten en de schaduwen later verhogen, of blootstellen voor de schaduwen maar de hoogtepunten uitblazen. Dankzij technologie kunnen we beide doen, en dit is waar computationele fotografie echt begint om die magie te laten gebeuren.

"Het hebben van een WYSIWYG-zoeker betekent nu dat we kunnen heroverwegen hoe u de belichting op de camera kunt regelen als u dat wilt", zegt Levoy, "dus als u op tikt, terwijl u voordat u een schuifregelaar voor belichtingscompensatie zou krijgen, u nu twee krijgt sliders. We noemen deze functie dubbele belichtingsregeling. En het kunnen hoogtepunten en schaduwen zijn. Het kan helderheid en dynamisch bereik zijn. Er zijn veel manieren om die twee variabelen te doen. We hebben het ingesteld om helderheid en schaduwen te doen. En dat geeft je een soort controle die niemand ooit eerder op een camera heeft gehad. "

Je bewerkt de foto voordat je zelfs de foto maakt.

Levoy heeft gelijk. Dual Exposure Control is iets dat alleen kan worden geproduceerd door middel van computational imaging. Als basislijn is de afbeelding gelijkmatig, met behouden hoogtepunten en zichtbare schaduwen. Maar als u wilt, kunt u hooglichten en schaduwen individueel aanpassen, zelfs voordat u de foto maakt. Dat is iets dat je voorheen alleen kon doen in fotobewerkingssoftware, nadat je de foto hebt gemaakt.

Het team van Levoy probeert voorbij de beperkingen van de traditionele camera te kijken door zijn inspanningen te concentreren op de beperkingen die traditionele camera's hebben. Terwijl de meeste fabrikanten Pro-modi introduceren om u de controle over het diafragma, de sluitertijd en de ISO te geven, probeert Google automatisch een beter beeld te maken dan u zou kunnen, zelfs als u die knoppen precies goed had.

Dood het met leren

Dus welke andere manieren kunnen computational imaging de traditionele cameratechnieken overtreffen? Dit jaar pakt het team van Levoy weinig licht aan.

Pixel 4 introduceert op leren gebaseerde witbalans in zijn camerasysteem. Deze functie werkt om de kleur in uw afbeeldingen continu te verbeteren, zelfs bij extreem slecht licht. Google richt zich specifiek op weinig licht en geel licht en gebruikte natriumdamplicht als een voorbeeld van iets dat het probeert op te lossen, maar streeft altijd naar een perfecte witbalans.

Natriumdamplampen zijn een type gaslamp die een bijna monochroom effect op onderwerpen veroorzaakt vanwege de extreem smalle golflengte van 589 nm tot 589,3 nm. Ze worden gebruikt omdat ze een zeer efficiënte lichtbron zijn, dus je ziet het vaak in straatlantaarns of andere lichten die lang mee moeten gaan. Dit is een van de moeilijkste situaties om een ​​nauwkeurige witbalans te krijgen, dus de softwarefix van Google is echt indrukwekkend.

"Zou geel zijn in het geval van natriumdamplicht, en we zullen proberen die slechte verlichting te neutraliseren", zegt Levoy. “Gebeurt veel bij weinig licht. Als je een disco inloopt en er rode neonlichten zijn, zal dat behouden blijven, maar zal proberen een deel van de ongunstige verlichting van het gebied te neutraliseren. "

Witgebaseerde witbalans was al aanwezig in de nachtzichtmodus van Google, vandaar dat het uiteindelijke beeld een veel betere kleur had dan zoiets als de automatische modus op de Huawei P30 Pro. Het systeem leert op basis van afbeeldingen die zijn genomen op het apparaat dat het uitgebalanceerd acht en gebruikt de aangeleerde gegevens om meer kleur-accurate afbeeldingen te produceren in slecht verlichte omstandigheden. Dit is iets wat traditionele camerasystemen gewoon niet kunnen doen. Zodra een camera wordt verzonden, is automatische witbalans automatische witbalans. Op Pixel werkt het altijd om na verloop van tijd beter te worden.

Op leren gebaseerde witbalans maakt geweldige beelden bij weinig licht nog eenvoudiger, maar Levoy wil computers gebruiken om een ​​eens zo moeilijke vorm van beeldvorming te vereenvoudigen: astrofotografie.

Kijk naar de sterren

Bron: Google

Levoy noemt deze nieuwe mogelijkheid "HDR + op steroïden". Waar standaard HDR + een burst van 10-15 korte belichtingen maakt en deze uitlijnt en middelt om scherpe beelden met weinig ruis te maken, neemt deze nieuwe modus tot 15 sets van 16-seconden belichtingen om een ​​belichting van 4 minuten te creëren. Het systeem lijnt vervolgens de afbeeldingen uit (aangezien sterren in de loop van de tijd bewegen) en past de juiste instellingen aan, terwijl ruis wordt verminderd met pixelgemiddelden om een ​​aantal verbluffende beelden te creëren.

Dit was een soort heilige graal voor mij.