Avec Ask Photos, Google va intégrer une fonction de recherche en langage naturel dans Google Photos pour aller au-delà des simples mots clefs.
C'est une fonction encore expérimentale qui a été révélée durant la Google I/O. Ask Photos est toutefois destiné à intégrer Google Photos à terme et il vise les utilisateurs lambda.
Google emploie son modèle Gemini pour autoriser des requêtes en langage naturel plutôt que des mots clefs tapés à la queue leu leu dans un champ de recherche. Illustration de cette possibilité avec la requête : « montre-moi les meilleures photos de chacun des parcs nationaux que j'ai visités ». Ask Photos retourne une liste de clichés qu'il estime pertinents.
Gemini ne va pas se contenter des métadonnées d'une image et de certains de ses attributs pour remonter des photos ou vidéos à la surface de l'écran, il analyse également le contenu d'une scène, les personnes qui y sont et divers détails secondaires qui la constituent.
L'exemple suivant est la requête : « Quels sont les thèmes que nous avons utilisés pour les fêtes d'anniversaire de Lena ? » Arrive alors une liste d'images où l'on peut voir la décoration des lieux ou les déguisements des enfants qui sont autant d'indices et d'indications.
Dans les deux cas, les galeries de photos obtenues en réponse sont complétées d'un résumé textuel sur la raison de leur choix. Dans le second exemple, Gemini rédige une synthèse des thèmes utilisés pour chacun des anniversaires.
Enfin, Gemini pourra venir à la rescousse pour faire le tri dans les quantités volumineuses de photos que l'on aura rapporté d'un voyage. Il aura pour mission, sur demande, d'en dégager les plus intéressantes ou représentatives et même de rédiger une légende en vue d'un partage sur les réseaux sociaux.
Ne manque plus que Gemini vous disent quoi photographier durant un voyage et la boucle sera bouclée…
Astuce : avoir la fonction « Encercler pour chercher » des téléphones Android sur iPhone
Les outils de retouche photo par IA de Google arrivent sur iOS
