De beste manieren om Stream Realtime van Google’s AI Studio te gebruiken

AI-bedrijven zijn allemaal bezig met het ‘bouwen van een betere muizenval’, om zo te zeggen. Ze proberen de AI-modellen te ontwikkelen die de mensheid vooruit zullen helpen (en meer mensen ertoe zullen aanzetten erin te investeren). Bedrijven willen de perfecte AI-assistent maken die het leven voor hen gemakkelijker zal maken, en de meeste mensen kennen de geweldige tool Stream Realtime van Google’s AI Studio niet.

Android heeft de Gemini-app, maar hoe zit het met je computer? Natuurlijk zijn er tools die AI naar de pc brengen, zoals de ChatGPT-desktopclient en Microsoft’s Copilot, maar wat heeft Google? Google heeft een aantal tools die u op uw computer kunt gebruiken, maar Stream Realtime in AI Studio komt het dichtst in de buurt van een volwaardige AI-assistent die uw computerscherm kan zien.

Wat is deze functie en wat zijn de beste manieren om deze AI-tool te gebruiken? Laten we het uitzoeken!

Wat is Stream Realtime in AI Studio?

AI Studio is een compleet platform waarmee je je eigen AI-modellen kunt bouwen op basis van Gemini. Als u een model wilt bouwen, kunt u uw API-sleutel ophalen en beginnen met het maken ervan. We zijn echter hier om een ​​van de functies van dit platform te gebruiken.

Ga eerst naar de officiële AI Studio-site en zorg ervoor dat u bent aangemeld als dat niet het geval is. Nadat u zich heeft aangemeld, wilt u het zijpaneel aan de linkerkant van het scherm openen. Klik op de knop Stream Realtime en je ziet een scherm verschijnen met drie opties. Je kunt met Gemini praten, net zoals Gemini Live, je webcam aanzetten om Gemini de wereld te laten zien, of Gemini je scherm laten zien. Om deze functie te gebruiken, moet u ervoor zorgen dat u uw browser toestemming geeft voor toegang tot uw microfoon en camera.

Als u uw scherm wilt delen, moet u de derde optie kiezen en kiezen welk scherm u wilt delen. U kunt het huidige browservenster dat u gebruikt delen, maar u kunt ook op andere vensters en andere applicaties klikken. Wanneer u deze functie gebruikt, maakt deze gebruik van uw microfoon en kunt u er een gesprek mee voeren. Het is alsof u Gemini Live op uw computer heeft.

Eén ding om op te merken is dat, op het moment dat dit wordt geschreven, de tool Gemini 2.0 Experimental zal gebruiken. Je zou dus moeten verwachten dat het naarmate de tijd verstrijkt krachtigere modellen zal gebruiken. Een ander ding om op te merken is dat Stream Realtime afzonderlijke vensters op uw computer kan bekijken, maar uw bureaublad niet. Het kan echter andere programma’s dan uw browser bekijken.

Hoe Stream Realtime het leven gemakkelijker kan maken

Je hebt dus een krachtige AI-tool binnen handbereik, maar wat nu? Hier zijn enkele manieren waarop Stream Realtime uw leven gemakkelijker kan maken.

Navigeren door uw browser

Dit is een functie die mogelijk beter werkt als u Chrome gebruikt. Gemini heeft een behoorlijk diepgaande kennis van Chrome, maar u hoeft Chrome niet te gebruiken. We hebben dit ook getest met Microsoft Edge. Gemini kan het hele browservenster zien, dus alle tabbladen die u geopend heeft, samen met uw bladwijzers.

U kunt vragen stellen als “Hoe kan ik mijn bladwijzers ordenen?” of “Kan ik hulp krijgen bij het organiseren van mijn tabbladen?” Daarnaast kunt u vragen waar bepaalde menu’s zijn als u het vergeet of hoe u toegang krijgt tot bepaalde delen van de interface. Dit kan ook voor andere browsers werken; u moet er echter voor zorgen dat u een populairdere browser zoals Edge of Firefox gebruikt.

Je huiswerkmaatje

Als je aan schoolwerk werkt, kun je de AI Studio oproepen en de optie voor scherm delen kiezen. Het zal kunnen zien welke problemen u op uw scherm heeft. Omdat het uw microfoon gebruikt, kunt u heen en weer praten over het probleem dat u probeert op te lossen. De AI zal kunnen begrijpen wat er aan de hand is in het probleem, en zal u er doorheen loodsen.

Het probleem met moderne generatieve AI is dat je er op een natuurlijke toon tegen kunt praten, dus wees niet bang om iets te zeggen als: ‘Ik probeer uit te vinden hoe ik dit probleem moet berekenen, maar ik ben een aantal dingen vergeten.’ de eerste stappen die ik moet zetten. Help me, maar geef me niet het antwoord.” Zorg ervoor dat u hem vertelt dat hij u het antwoord niet moet geven als u dat niet wilt, omdat hij tijdens onze tests door het probleem heen zou bulldozeren en u het antwoord zou geven.

Er is iets om op te merken; je moet je werk dubbel controleren. Er waren een paar momenten waarop Gemini ronduit de antwoorden op de vragen verkeerd kreeg. Het kreeg een probleem van 537 + 426 voorgelegd en antwoordde 1.063. Het is beter om het te vragen om u te helpen het juiste antwoord te vinden in plaats van het antwoord op uw vraag op te schrijven.

Het is niet alleen in staat om wiskundige problemen op te lossen. Gemini heeft het afgelopen jaar vooruitgang geboekt en is behoorlijk goed geworden in het oplossen van problemen, dus je kunt verwachten dat het apparaat je kan helpen met je schoolwerk, ongeacht welk onderwerp het is. Het kan een geweldige bijlesdocent zijn die je helpt er doorheen te komen.

Uw co-auteur

Omdat Gemini een liveweergave van uw scherm heeft, kunt u deze gebruiken om enkele verhaalideeën te laten weerspiegelen. Je voert er een 1-op-1 gesprek mee alsof het een ander mens is. We raden u af om Gemini een verhaal voor u te laten genereren. U kunt het echter altijd gebruiken om uw schrijven te verbeteren.

U kunt bijvoorbeeld om enkele ideeën vragen over hoe u uw verhaal verder kunt brengen of welke suggesties het bevat. Nogmaals, je kunt op een heel gemoedelijke manier met Gemini praten, zodat je kunt ontspannen en kunt doen alsof je alleen maar met je beste vriend aan het chatten bent. Terwijl we dit testten, creëerden we een behoorlijk cheesy sprookje over a gemene prinses die door een heks wordt genezen en een huid krijgt die zo koud is als ijs. Om de betovering te verbreken moet ze iemand vinden op wie ze verliefd kan worden. Dat verhaal kwam, afgezien van het smeken om een ​​rechtszaak van Disney, puur voort uit spuugballen en heen en weer gooien van ideeën.

Het mooie hiervan is dat Gemini kan zien wat er op je scherm staat. Stel dat u een concept van een verhaal wilt ophalen. Gemini kan ernaar kijken en wat context krijgen. Weet alleen dat het alleen kan zien wat er op het scherm staat. Als uw verhaal dus meerdere pagina’s lang is, zal het niet zo effectief zijn. Hij ziet u echter wel live typen, zodat hij altijd over de meest actuele informatie beschikt.

Hulp bij fotobewerking

Het hebben van een AI die naar je computerscherm kan kijken, is (onder andere…) handig als het gaat om het bewerken van foto’s. U kunt de AI vragen stellen over hoe u de afbeelding wilt bewerken. De AI geeft u advies en vertelt u welke hulpmiddelen u kunt gebruiken.

Je kunt bijvoorbeeld dingen zeggen als ‘Ik wil deze foto dramatischer maken’. Vervolgens zal het met u samenwerken totdat u tevreden bent met uw afbeelding. Omdat de verwerking in realtime plaatsvindt, helpt het u bij het bewerken van de foto.

Stream Realtime is een geweldig hulpmiddel

Hoewel Stream Realtime niet het soort assistent is dat in de software van uw computer kan graven en namens u acties kan uitvoeren, is het nog steeds een geweldig hulpmiddel om te gebruiken als u hulp nodig heeft bij uw dagelijkse taken. Het geeft je een voorproefje van wat Google en andere bedrijven met AI willen doen.

Thijs Van der Does