Video Boost met Night Sight werd in oktober 2023 aangekondigd naast de Google Pixel 8-serie. De uitrol begon enkele weken later, en alleen voor het ‘Pro’-model. Het is een technologie die AI gebruikt om de video's die je maakt met je Pixel-apparaat aanzienlijk te verbeteren.
De twee elementen van de technologie werken samen en zorgen elk voor verschillende dingen. “Video Boost” richt zich op het verbeteren van parameters zoals dynamisch bereik, contrast, kleuren, stabilisatie en detailniveau. Aan de andere kant is ‘Night Sight’ de implementatie in video’s van de functie die de Google Camera-app al lange tijd biedt voor foto’s.
In de nieuwste aflevering van Made by Google Podcast gaf het bedrijf meer details over de ontwikkeling van Video Boost met Night Sight. Het team onthulde wat ze precies zochten met deze technologie. Ze noemden ook de belangrijkste uitdagingen die ze onderweg tegenkwamen.
De focus van Google bij het ontwikkelen van Video Boost met Nachtzicht
Het belangrijkste doel van Google was om “ontgrendel de beste videokwaliteit ooit die je op een smartphone hebt gezien.” Pixel-apparaten staan bekend om hun hoogwaardige foto's, maar video-opnamen zijn nog nooit op hetzelfde niveau geweest. Dus nu zullen ze proberen de balans tussen kwaliteit tussen foto en video op hun telefoons in evenwicht te brengen.
Met betrekking tot de exclusiviteit van de functie op de Pixel 8 Pro zeiden ze dat ze “Ik ben net begonnen met de Pixel 8 Pro om dat voor onze gebruikers te doen.” Hoewel het nergens een officiële bevestiging van is, opent dit de deur voor Video Boost met Nachtzicht om in de toekomst meer Pixel-apparaten te bereiken.
De uitdagingen waarmee het ontwikkelteam te maken kreeg
Wat de uitdagingen betreft, noemden ze de verwerkingskracht van smartphones. Een belangrijk verschil tussen Nachtzicht voor foto's en Nachtzicht voor video is de manier waarop het wordt verwerkt. Terwijl bij foto's de verwerking op het apparaat plaatsvindt, vertrouwen ze bij video's op de kracht van cloudgebaseerde AI. Dit komt omdat smartphones nog steeds onvoldoende kracht hebben voor complexe lokale videoverwerking.
Dit is niet verrassend, aangezien deze taak zelfs voor desktop-pc's ingewikkeld kan zijn. Laten we niet vergeten dat videobestanden exponentieel langer en complexer zijn dan foto's. Over het gebruik van de cloud voor videoverwerking zei het Google-team het volgende:
“We kunnen dus beslissen hoeveel frames we willen uitlijnen en samenvoegen, en hoe we ze gaan samenvoegen. We kunnen dit zelfs naar een ander niveau tillen. Wij kunnen zelfs veel beter. We kunnen zelfs complexere algoritmen tegelijkertijd uitvoeren. We kunnen bijvoorbeeld ontvaging uitvoeren. We kunnen de stabilisatie uitvoeren. We kunnen kleurcorrectie uitvoeren.”
Hoewel het gebruik van de cloud voor verwerking het voordeel heeft dat u de volledige kracht van de servers van Google kunt benutten, betekent dit ook dat u de functie niet kunt gebruiken zonder een internetverbinding.
Als klap op de vuurpijl was een andere grote uitdaging de kalibratie van de verwerking om elk type probleem in het eindresultaat te voorkomen. Dat wil zeggen, ze moesten uitzoeken hoe ze vertragingen tussen audio en video, chromatische aberraties, willekeurig flikkeren of soortgelijke effecten konden vermijden. Niemand wil immers een tool gebruiken die voortdurend onbruikbare resultaten genereert.
