Découvrez l’IA de Google sous un nouveau jour sur Android

Nous sommes à un moment charnière, où les dernières avancées de l'IA réinventent ce que les téléphones peuvent faire. Avec l'IA de Google au cœur du système d'exploitation Android, les milliards de personnes qui utilisent Android peuvent désormais interagir avec leurs appareils de manière totalement nouvelle.

Aujourd'hui, nous partageons des mises à jour qui vous permettent de découvrir l'IA de Google sur Android.

L’aide aux devoirs avec Entourer pour chercher

Avec Entourer pour chercher intégré directement dans l'expérience utilisateur, vous pouvez rechercher tout ce que vous voyez sur votre téléphone en utilisant un simple geste - sans avoir à arrêter ce que vous faites ou à passer à une autre application. Depuis le lancement de Samsung Unpacked, nous avons ajouté de nouvelles fonctionnalités à Entourer pour chercher, comme la traduction en plein écran, et nous avons étendu la disponibilité à plus d'appareils Pixel et Samsung.

À partir d'aujourd'hui, Circle to Search peut désormais aider les étudiants à faire leurs devoirs, en leur donnant une compréhension plus approfondie, et pas seulement une réponse, directement depuis leurs téléphones et tablettes. Lorsque les élèves encerclent une question sur laquelle ils sont bloqués, ils obtiennent des instructions étape par étape pour résoudre une série de problèmes de physique et de mathématiques sans quitter leur feuille d'information ou leur syllabus numérique. Plus tard dans l'année, Circle to Search sera en mesure d'aider à résoudre des problèmes encore plus complexes impliquant des formules symboliques, des diagrammes, des graphiques et plus encore. Tout cela est possible grâce à notre effort LearnLM pour améliorer nos modèles et produits pour l'apprentissage.

Entourer pour chercher est déjà disponible sur plus de 100 millions d'appareils aujourd'hui. Avec l'intention de proposer l'expérience à davantage d'appareils, nous sommes sur la bonne voie pour doubler ce chiffre d'ici la fin de l'année.

Gemini sera encore meilleur pour comprendre le contexte et vous aider à accomplir vos tâches

Gemini sur Android est un nouveau type d'assistant qui utilise l'IA générative pour vous aider à être plus créatif et productif. Cette expérimentation, intégrée dans Android est en train de devenir encore meilleure pour comprendre le contexte de ce qui se trouve sur votre écran ainsi que l'application que vous utilisez.

Bientôt, vous pourrez faire apparaître Gemini en superposition, par-dessus l'application dans laquelle vous vous trouvez, pour utiliser facilement Gemini de plusieurs façons. Par exemple, vous pouvez glisser-déposer des images générées dans Gmail, Google Messages et d'autres endroits, ou appuyer sur "Demander à cette vidéo" pour trouver des informations spécifiques dans une vidéo YouTube. Si vous avez Gemini Advanced, vous aurez également la possibilité de "Demander à ce PDF" pour obtenir rapidement des réponses sans avoir à faire défiler plusieurs pages. Cette mise à jour sera déployée sur des centaines de millions d'appareils au cours des prochains mois.

Et nous continuerons à améliorer Gemini pour vous offrir des suggestions plus dynamiques en fonction de ce qui se trouve sur votre écran.

Des fonctionnalités multimodales bientôt complètes dans Gemini Nano

Android est le premier système d'exploitation mobile qui inclut un modèle de base intégré à l'appareil. Avec Gemini Nano, nous sommes en mesure de vous offrir des expériences rapidement et de garder vos informations complètement privées. À partir de Pixel plus tard cette année, nous introduirons notre dernier modèle, Gemini Nano avec Multimodalité. Cela signifie que votre téléphone ne sera pas seulement capable de traiter des entrées de texte, mais aussi de comprendre plus d'informations en contexte, comme les images, les sons et le langage parlé.

Des descriptions plus claires avec TalkBack

Plus tard cette année, les capacités multimodales de Gemini Nano seront intégrées à TalkBack, aidant les personnes aveugles ou malvoyantes à obtenir des descriptions plus riches et plus claires de ce qui se passe dans une image. En moyenne, les utilisateurs de TalkBack rencontrent 90 images non étiquetées par jour. Cette mise à jour permettra de combler les informations manquantes, qu'il s'agisse de détails supplémentaires sur le contenu d'une photo envoyée par la famille ou des amis, ou du style et de la coupe des vêtements lors d'achats en ligne. Comme Gemini Nano est intégré à l'appareil, ces descriptions sont rapides et fonctionnent même en l'absence de connexion réseau.

Des alertes en cas de suspicion d’escroquerie pendant vos appels téléphoniques

Selon un rapport récent, les gens ont perdu plus d'un trillion de dollars en fraudes sur une période de 12 mois. Nous testons une nouvelle fonctionnalité qui utilise Gemini Nano pour fournir des alertes en temps réel pendant un appel s'il détecte des modèles de conversation couramment associés aux escroqueries. Par exemple, vous recevriez une alerte si un "représentant de banque" vous demande de transférer de l'argent de toute urgence, d'effectuer un paiement avec une carte cadeau ou de fournir des informations personnelles telles que des codes PIN ou des mots de passe de carte, ce qui estinhabituel pour une banque. Cette protection se fait entièrement sur l'appareil, de sorte que votre conversation reste privée. Nous vous en dirons plus sur cette fonctionnalité optionnelle plus tard dans l'année.

Encore plus à venir sur Android

Nous ne faisons que commencer à explorer comment l'IA embarquée peut changer ce que votre téléphone peut faire, et nous continuerons à intégrer l'IA de Google dans chaque aspect de l'expérience smartphone avec Pixel, Samsung et bien d'autres. Si vous êtes développeur, consultez le blog Android Developers pour savoir comment vous pouvez développer avec nos derniers modèles et outils d'IA, comme Gemini Nano et Gemini dans Android Studio.

Restez à l'écoute demain pour d'autres mises à jour sur Android 15 et l'écosystème.