Lors de la keynote I/O 2024 de Google, l’entreprise a passé pratiquement tout son temps à parler d’IA (comme on pouvait s’y attendre). Mais un point important est son intégration à Android. Gemini joue ici le même rôle d’assistant virtuel que l’Assistant Google, mais de manière plus intégrée et contextuelle.
Après avoir lancé l’application Gemini en février dernier, Google commence donc à étoffer l’expérience de Gemini sur Android avec de nouvelles fonctionnalités qui intègrent l’IA dans davantage d’aspects de votre vie quotidienne.
Un nouveau design pour Gemini dans Android
Le design de Gemini a été modifié pour qu’il flotte au-dessus de ce que vous êtes en train de faire sur votre smartphone, plutôt que d’occuper tout l’écran comme c’est le cas actuellement. Bref, de la même façon dont Google Assistant se présentait auparavant. Mais cette fois-ci, vous disposez d’un énorme champ de texte dans lequel vous pouvez saisir vos prompts. Et l’accent est moins mis sur les prompts vocaux.
Kerry Wan/ZDNET
La nouvelle surcouche propose donc une intégration plus poussée avec l’application que vous utilisez. Par exemple, lorsque vous regardez une vidéo sur YouTube, vous pouvez ouvrir Gemini et voir un bouton « Ask this video ». Ce qui vous permet d’utiliser la base de connaissances de la vidéo pour poser des questions ou la résumer. Vous pouvez également le faire avec des PDF, à condition de vous abonner à Gemini Advanced, qui propose une fenêtre contextuelle plus longue.
Du « glisser-déposer » pour Gemini
Gemini sera également plus facile à intégrer dans les applications, par exemple grâce à la fonction « glisser-déposer ». Google a montré comment vous pouviez demander au chatbot de générer une image et, une fois qu’elle est prête, vous pouvez la faire glisser dans une application de messagerie, la déposer et l’envoyer à votre contact.
Au fil du temps, Google affirme que Gemini aura une meilleure connaissance du contexte de chaque application de votre smartphone, et facilitera la navigation grâce à des suggestions dynamiques.
Circle to Search résout vos problèmes de maths
Circle to Search, qui est déjà disponible sur plus de 100 millions d’appareils Android, est aussi mis à jour pour aider à la résolution de problèmes. Plus précisément, cette fonctionnalité pourra aider les étudiants à faire leurs devoirs en les aidant à mieux comprendre les problèmes complexes de physique et de mathématiques sur lesquels ils sont bloqués.
Cette nouvelle fonctionnalité s’appuie sur le modèle LearnLM de Google, qui vise à faciliter l’apprentissage grâce à l’IA. Au fil du temps, Google affirme que vous pourrez utiliser Circle to Search pour résoudre des problèmes plus complexes impliquant des formules symboliques, des diagrammes et des graphiques.
Circle to Search est déjà disponible sur les principaux smartphones, y compris le Samsung Galaxy S24. Kerry Wan/ZDNET
« Gemini Nano with Multimodality »
Google a également annoncé que Gemini Nano, le modèle intégré directement dans Android (bien que sur très peu d’appareils), recevra une mise à jour appelée « Gemini Nano with Multimodality ». Le LLM mis à jour vous permettra d’utiliser différents médias tels que le texte, les photos, les vidéos et la voix pour interagir avec Gemini et obtenir des réponses aux questions, des informations sur les requêtes, et plus encore.
Le modèle sera doté de fonctions telles que TalkBack pour les descriptions textuelles d’images et les notifications de spam en temps réel pendant les appels téléphoniques.
Ce ne sont là que quelques-unes des fonctions d’intelligence artificielle que Google apportera à Android 15 et aux versions ultérieures au fil du temps. Certaines d’entre elles seront d’abord lancées sur Pixel, tandis que d’autres seront disponibles pour tous ceux qui téléchargeront l’application Gemini. Il reste à voir comment tout cela se déroulera exactement, mais il est clair que si vous possédez et utilisez un téléphone Android, il est sur le point de devenir beaucoup plus puissant.
Source : « ZDNet.com »