Google's Gemini multimodale modellen waren onder andere Gemini Nano, ontworpen voor mobiele apparaten zoals de Pixel 8 Pro.
A Google blogbericht onthulde tal van nieuwe AI-functies voor Pixel-telefoons, mogelijk gemaakt door Gemini Nano, een gespecialiseerde variant van Google's Gemini AI-model geoptimaliseerd voor bewerkingen op het apparaat.
Gemini Nano is extreem licht maar toch capabel, wat betekent dat het gegevens lokaal op het apparaat kan verwerken in plaats van ze te verzenden en ontvangen vanuit de cloud. Gemini Nano wordt aangedreven door de Tensor G3-chip van de Pixel 8.
Het biedt twee nieuwe geavanceerde AI-functies aan het apparaat toegevoegd. De eerste is de functie 'Samenvatten' in de geluidsrecorder-app, die opgenomen gesprekken kan analyseren en samenvatten door gebruik te maken van Gemini's vermogen om audio om te zetten in tekst.
De tweede is een intelligente antwoordfunctie binnen de Gboard-app, momenteel op maat gemaakt voor WhatsApp, die contextgevoelige antwoordsuggesties biedt.
Andere functies zijn 'Video Boost', een verzameling hulpmiddelen voor videoverbetering die worden aangestuurd door de videobewerkingsmogelijkheden van Gemini. Dit omvat verbeteringen in kleurgradatie, aanpassing van belichting, stabilisatie en korrelreductie om de videokwaliteit te verbeteren.
Video Boost bevat met name Google's Night Sight-technologie, waarmee superieure video's kunnen worden vastgelegd bij weinig licht. Deze functie vereist echter dat video's worden geüpload naar Google Foto's voor verwerking.
De Pixel 8 en Pixel 8 Pro bieden ook Night Sight in de Timelapse-modus, waarmee wordt voortgebouwd op de indrukwekkende prestaties van de serie bij weinig licht. Daarnaast is ook de functie Photo Unblur verfijnd met AI.
Andere toevoegingen zijn de functionaliteit om Pixel-smartphones (vanaf Pixel 6) als webcams te gebruiken, een geüpgradede Google Password Manager en een nieuwe reparatiemodus die gebruikersgegevens beschermt tijdens het onderhoud van apparaten.
Nog niet zo lang geleden, Google heeft AI-functies voor het bewerken van afbeeldingen aangekondigdwaaronder "Best Take", waarmee gebruikers de gezichten van mensen na de foto kunnen verwisselen. Dit heeft bijgedragen aan het voortdurende debat over diepe vervalsingen, waarbij sommigen erop wijzen dat beeldmanipulatie nu eenvoudiger is dan ooit.
Andrew Pearsall, een doorgewinterde fotograaf, legt uit: "Eén simpele manipulatie, zelfs om esthetische redenen, kan ons op een duister pad brengen."
Maar, zoals professor Rafal Mantiuk van de Universiteit van Cambridge tegensprak: "Mensen willen de werkelijkheid niet vastleggen... Ze willen mooie beelden vastleggen.
In elk geval komt lokale AI naar smartphones, te beginnen met de Pixel 8 Pro. Uiteindelijk zal het de norm worden.
