Selon les découvertes de la chercheuse Jane Manchun Wong, Waymo teste actuellement l’intégration du chatbot Gemini de Google dans ses véhicules autonomes, afin d’offrir une assistance virtuelle aux passagers. En fouillant dans le code de l’application mobile de Waymo, Wong a révélé un « système complet de prompt » destiné à cette intégration, intitulé en interne « Waymo Ride Assistant Meta-Prompt ». Ce document de plus de 1200 lignes décrit précisément le comportement attendu de l’assistant IA à bord des véhicules, suggérant qu’il ne s’agit pas d’un simple chatbot mais d’une véritable aide à la navigation et au confort des usagers.
Bien que cette fonctionnalité ne soit pas encore déployée dans la version publique des véhicules Waymo, Wong souligne que le système est conçu pour répondre à diverses demandes, gérer certains paramètres en cabine comme le climat, et même rassurer les passagers si nécessaire. Julia Ilina, porte-parole de Waymo, indique que l’entreprise continue à expérimenter avec différentes fonctionnalités pour rendre l’expérience de conduite plus agréable, fluide et utile, précisant que toutes ces innovations ne seront peut-être pas forcément introduites chez tous les usagers.
Ce n’est pas la première fois que Gemini est intégré dans l’écosystème d’Alphabet, la maison mère de Google. Waymo a déjà utilisé les « connaissances mondiales » de Gemini pour entraîner ses véhicules à gérer des scénarios complexes, rares ou à hauts risques, renforçant ainsi leur capacité à naviguer dans des environnements difficiles. Wong explique que l’assistant est programmé pour avoir une identité et une mission claires : être un compagnon amical et serviable dans le véhicule, contribuant à améliorer le voyage en fournissant des informations utiles dans un ton rassurant, sans jargon technique et en réponses brèves de 1 à 3 phrases.
La véritable innovation réside dans la capacité de Gemini à enrichir l’expérience passager tout en restant discret et sécuritaire, sans intervenir dans la conduite autonome ni dans les fonctionnalités essentielles du véhicule.
Lorsqu’un passager active l’assistant via l’écran intégré, Gemini peut choisir parmi plusieurs salutations personnalisées et accéder à des informations contextuelles telles que le nombre de trajets effectués. Il peut également gérer certains paramètres en cabine, comme la température, l’éclairage ou la musique, mais certaines commandes comme le changement de route ou la régulation du volume restent en dehors de ses capacités actuelles. Si un passager demande une action non supportée, le bot répondra par des phrases « aspirationales », telles que « Ce n’est pas quelque chose que je peux faire pour le moment ».
Un aspect notable est que l’assistant est conçu pour différencier clairement ses réponses de celles du système de conduite autonome, le « Waymo Driver ». Par exemple, lorsqu’on lui demande comment il perçoit la route, Gemini doit préciser que c’est le « Waymo Driver » qui utilise des capteurs pour cette tâche, évitant ainsi toute confusion ou communication ambiguë. Le système prévoit aussi des réponses pour éviter de commenter directement des incidents ou des vidéos concernant la performance du véhicule, laissant ainsi la porte fermée à toute polémique publique. Enfin, Gemini peut répondre à des questions de culture générale ou liées à la météo, mais ne pourra pas réaliser d’actions concrètes telles que commander de la nourriture ou gérer des situations d’urgence.
