Google har avslørt en ny eksperimentell funksjon som lar AI-assistenten se på verden utenfor kjøretøyet ditt. Selskapet brukte sitt populære Gemini-system til demonstrasjonen. Den nye teknologien kobler AI direkte til et kjøretøys innebygde forovervendte kamera, og gjør det til et par smarte øyne. Ved å koble programvare med fysisk maskinvare kan Gemini svare på komplekse spørsmål om bygninger, landemerker eller gateoppsett når du kjører forbi dem.
Teknologigiganten valgte et veldig spesifikt kjøretøy for å vise frem prosjektet. Demonstrasjonen gikk helt inne i Volvo EX60, et friskt tilskudd til premium elbilmarkedet. Denne helelektriske SUV-en er 4 803 mm lang, 1 908 mm bred og er 1 635 mm høy. Den kjører på en sjenerøs akselavstand på 2.970 mm som maksimerer kabinplass. I Europa starter prisene for denne modellen på rundt €66 500 for den bakhjulsdrevne basisversjonen.

Sameer Samat, presidenten for Android hos Google, ledet livedemonstrasjonen sammen med Logan Kilpatrick, produktlederen for Google AI Studio. Hele testkjøringen fant sted på Googles hovedcampus i Mountain View i California. Ideen bak eksperimentet var enkel - ingeniørteamet ønsket å se hva som ville skje hvis Gemini-systemet visuelt kunne oppfatte miljøet under kjøring i den virkelige verden. For brukere som har opplevd kamerafunksjonene på standard mobiltelefoner, vil det overordnede konseptet føles ganske kjent.
Hver gang teknologiselskaper snakker om sporing av biler med kameraer, følger store personvernspørsmål tett etter. Google forutså dette og avklarte at kjøretøyet ikke overvåker veien kontinuerlig. Programvaren blokkerer kamerafeeden til sjåføren aktivt samhandler med systemet og stiller et spørsmål. Bare akkurat i det øyeblikket sender det frontvendte kameraet visuelle data til AI-serveren. Når systemet leverer svaret, mister du tilgangen til kameraet umiddelbart.

Programvaren presterte veldig bra når den identifiserte lokale monumenter og campusfunksjoner under prøvekjøringen. For eksempel ba Samat systemet om å identifisere en gjenstand utenfor, og AI ga riktig navn til en lokal offentlig kunstinstallasjon kalt "The Orb." Kjøretøyets assistent påpekte også det spesifikke solcelletaket på den nærliggende Gradient Canopy-bygningen. For å flytte grensene spurte teamet om Shoreline Amphitheatre, og AI forklarte nøyaktig den arkitektoniske historien til det berømte stedet.
Men tidlige brukere må pakke tålmodigheten fordi systemet ennå ikke er feilfritt. Livedemonstrasjonen avslørte en veldig merkbar forsinkelse mens bilen overførte data til de eksterne serverne. Sjåfører bør ikke forvente en fancy filmskjermopplevelse - i motsetning til en standard smarttelefon, viser ikke den store 15,0-tommers sentrale berøringsskjermen i Volvo EX60 en direktekamerasøker. I stedet hører sjåføren ganske enkelt et talt svar på spørsmålet.

Selve bilen er et veldig sterkt hardwarefundament for avanserte digitale eksperimenter. Basis P6-modellen til Volvo EX60 har en 83 kWh batteripakke og en elektrisk motor som leverer 275 kW (374 hk) kraft. Kjøpere som ønsker mer ytelse kan velge P12 firehjulsdrevet variant. Denne versjonen øker batterikapasiteten til 117 kWh og leverer en imponerende 500 kW (680 hestekrefter) total kraft, selv om den hever prisen til rundt €75.500.
Googles ingeniører ser fortsatt på forskjellige måter denne programvaren kan hjelpe folk under daglige pendler. Et svært praktisk eksempel inkluderer å reise gjennom land der du ikke snakker det lokale språket. En sjåfør kan ganske enkelt be AI om å se på et komplisert veiskilt og oversette teksten, og eliminere den farlige vanen med å se ned på en mobiltelefonskjerm mens han navigerer i et travelt veikryss eller prøver å lese ukjente skilt.
Her er den fullstendige presentasjonen av de siste Gemini-utviklingene - hopp til 34:36 hvis du bare vil se Volvo- og AI-eksperimentet:
Per nå har Google ikke delt noen solide planer om å gi ut denne funksjonen til allmennheten. Selskapet nektet også å si om andre elbiler som bruker Googles innebygde økosystem vil motta denne kamerafunksjonen i fremtiden. For nå er teknologien et fascinerende blikk inn i fremtiden for bilprogramvare.