Google Lens : une nouvelle façon de rechercher qui combine des images et du texte en une seule requête
Plus tôt cette année 2021, lors de la conférence annuelle des développeurs Google I/O, la société a présenté une nouvelle étape importante de l’IA appelée Multitask Unified Model, ou MUM. Cette technologie peut simultanément comprendre des informations dans […]
Ce que vous allez découvrir
- Google Lens et MUM
Google Lens : une nouvelle façon de rechercher qui combine des images et du texte en une seule requête
Plus tôt cette année 2021, lors de la conférence annuelle des développeurs Google I/O, la société a présenté une nouvelle étape importante de l’IA appelée Multitask Unified Model, ou MUM. Cette technologie peut simultanément comprendre des informations dans un large éventail de formats, y compris du texte, des images et des vidéos, et dégager des informations et des liens entre des sujets, des concepts et des idées. Aujourd’hui, Google a annoncé l’une des façons dont il envisage de mettre MUM au travail dans ses propres produits avec une mise à jour de sa recherche visuelle Google Lens.
Google Lens, rien à voir avec le Racing Club de Lens dans le Pas-de-Calais, est la technologie de reconnaissance d’images qui vous permet d’utiliser l’appareil photo du téléphone pour effectuer diverses tâches, telles que la traduction en temps réel, l’identification des plantes et des animaux, le copier-coller à partir de photos, la recherche d’éléments similaires à ceux du viseur de l’appareil photo, obtenir de l’aide pour résoudre des problèmes de mathématiques et bien plus encore.
Google Lens et MUM
Bientôt, Google annonce qu’il tirera parti des capacités de MUM pour mettre à niveau Google Lens avec la possibilité d’ajouter du texte aux recherches visuelles afin de permettre aux utilisateurs de poser des questions sur ce qu’ils voient.
En pratique, c’est ainsi qu’une telle fonctionnalité pourrait fonctionner. Vous pouvez afficher une photo d’une chemise que vous aimez dans la recherche Google, puis appuyer sur l’icône de l’objectif et demander à Google de vous trouver le même motif, mais sur une paire de chaussettes. En tapant quelque chose comme « chaussettes avec ce modèle », vous pouvez demander à Google de trouver des requêtes pertinentes d’une manière qui aurait pu être plus difficile à faire si vous n’aviez utilisé que la saisie de texte.
En combinant l’image et les mots en une seule requête, Google peut avoir une meilleure chance de fournir des résultats de recherche pertinents.
Dans un autre exemple, une partie de votre vélo a été cassée et vous devez rechercher sur Google des conseils de réparation. Cependant, vous ne savez pas comment s’appelle la pièce. Au lieu de vous plonger dans les manuels de réparation, vous pouvez pointer Google Lens sur la partie cassée de votre vélo, puis taper « comment réparer ». Cela pourrait vous connecter directement avec le moment exact dans une vidéo qui va vous aider.
La mise à jour de Google Lens sera déployée dans les mois à venir, à noter qu’elle doit encore subir des « tests et une évaluation rigoureuse », qui font partie de chaque nouveau modèle d’IA qu’elle déploie.
- Articles connexes
- Plus de l'auteur