Google a révélé une nouvelle fonctionnalité expérimentale qui permet à l'assistant IA de regarder le monde extérieur à votre véhicule. L'entreprise a utilisé son populaire système Gemini pour la démonstration. La nouvelle technologie connecte l’IA directement à la caméra frontale intégrée d’un véhicule, la transformant en une paire d’yeux intelligents. En reliant le logiciel au matériel physique, Gemini peut répondre à des questions complexes sur les bâtiments, les monuments ou le tracé des rues lorsque vous les dépassez.
Le géant de la technologie a choisi un véhicule très spécifique pour présenter le projet. La démonstration s'est déroulée entièrement à l'intérieur du Volvo EX60, un nouvel ajout au marché des véhicules électriques haut de gamme. Ce SUV entièrement électrique mesure 4 803 mm de long, 1 908 mm de large et 1 635 mm de haut. Il repose sur un empattement généreux de 2 970 mm qui maximise l’espace de l’habitacle. En Europe, le prix de ce modèle commence à environ 66 500 € pour la version de base à propulsion arrière.
Sameer Samat, président d'Android chez Google, a dirigé la démonstration en direct aux côtés de Logan Kilpatrick, responsable produit de Google AI Studio. L'intégralité du test s'est déroulée sur le campus principal de Google à Mountain View, en Californie. L'idée derrière l'expérience était simple : l'équipe d'ingénierie voulait voir ce qui se passerait si le système Gemini pouvait percevoir visuellement l'environnement lors d'une conduite réelle. Pour les utilisateurs qui ont expérimenté les fonctionnalités de l’appareil photo sur les téléphones mobiles standards, le concept global semblera assez familier.
Chaque fois que les entreprises technologiques parlent de suivre les voitures avec des caméras, de grandes questions en matière de confidentialité suivent de près. Google a anticipé cela et a précisé que le véhicule ne surveille pas la route en permanence. Le logiciel bloque le flux de la caméra jusqu'à ce que le conducteur interagisse activement avec le système et pose une question. Ce n’est qu’à ce moment précis que la caméra frontale envoie des données visuelles au serveur AI. Une fois que le système fournit la réponse, l’accès à la caméra est instantanément perdu.
Le logiciel a très bien fonctionné lors de l'identification des monuments locaux et des caractéristiques du campus lors de l'essai routier. Par exemple, Samat a demandé au système d'identifier un objet à l'extérieur, et l'IA a correctement nommé une installation d'art public local appelée « L'Orbe ». L'assistant du véhicule a également réussi à signaler le toit solaire spécifique du bâtiment voisin Gradient Canopy. Pour repousser les limites, l'équipe a posé des questions sur l'amphithéâtre Shoreline, et l'IA a expliqué avec précision l'histoire architecturale du célèbre lieu.
Mais les premiers utilisateurs doivent faire preuve de patience car le système n’est pas encore parfait. La démonstration en direct a révélé un retard très notable lors de la transmission des données par la voiture aux serveurs distants. Les conducteurs ne doivent pas s'attendre à une expérience de cinéma sophistiquée : contrairement à un smartphone standard, le grand écran tactile central de 15,0 pouces du Volvo EX60 n'affiche pas de viseur de caméra en direct. Au lieu de cela, le conducteur entend simplement une réponse vocale à la question.
La voiture elle-même constitue une base matérielle très solide pour des expériences numériques avancées. Le modèle de base P6 du Volvo EX60 dispose d'une batterie de 83 kWh et d'un moteur électrique développant 275 kW (374 ch) de puissance. Les acheteurs qui souhaitent plus de performances peuvent opter pour la variante à traction intégrale P12. Cette version augmente la capacité de la batterie à 117 kWh et délivre une puissance totale impressionnante de 500 kW (680 chevaux), bien qu'elle augmente le prix à environ 75 500 €.
Les ingénieurs de Google étudient toujours différentes manières dont ce logiciel peut aider les gens lors de leurs déplacements quotidiens. Un exemple très pratique consiste à voyager dans des pays dont vous ne parlez pas la langue locale. Un conducteur pourrait simplement demander à l’IA d’examiner un panneau routier complexe et de traduire le texte, éliminant ainsi l’habitude dangereuse de regarder l’écran d’un téléphone portable tout en naviguant dans une intersection très fréquentée ou en essayant de lire des panneaux inconnus.
Voici la présentation complète des derniers développements Gemini - passez à 34:36 si vous souhaitez simplement regarder l'expérience Volvo et AI :
Pour l’instant, Google n’a pas fait part de projets concrets visant à rendre cette fonctionnalité accessible au grand public. La société a également refusé de dire si d’autres véhicules électriques utilisant l’écosystème Google Built-in bénéficieraient de cette capacité de caméra à l’avenir. Pour l’instant, cette technologie constitue un regard fascinant sur l’avenir des logiciels automobiles.
