Queryable : le moteur de recherche intelligent qu'Apple devrait intégrer à Photos
Le moteur de recherche de l'application Photos d'Apple trouve rarement les images auxquelles vous pensez ? Queryable (2,49 €) est une app conçue pour iPhone, iPad et Mac qui indexe la photothèque en utilisant CLIP d’OpenAI et offre ensuite une recherche bien plus puissante que celle d'Apple. CLIP est un moteur neuronal qui classe des images en fonction de leur sujet et peut ainsi servir à trouver des éléments en décrivant leur contenu. Apple propose une solution similaire, Google aussi dans sa propre app, mais comme souvent, ces nouvelles méthodes basées sur l’intelligence artificielle donnent des résultats bien supérieurs.
Après avoir indexé ma photothèque contenant plus de 70 000 photos, voici quelques résultats de recherche sur mon iPhone 13 Pro. J’ai utilisé l’anglais dans Queryable, car même si cela fonctionne aussi en français, les résultats sont meilleurs dans la langue de Jony Ive. J’ai utilisé en revanche du français dans Photos, puisque c’est la langue de mon smartphone, mais j’ai vérifié que ce n’était pas mieux en anglais.
Comme on dit, les résultats sont sans appel. Mis à part sur la requête avec les chats au soleil où Photos a trouvé un résultat en se basant sur le texte, l’app fournie avec iOS n’a rien trouvé, là où Queryable m’a donné à chaque fois des images qui correspondaient à ma demande. Photos offre une recherche assez basique, basée sur un seul mot à la fois. On peut les combiner pour former des requêtes complexes, certes, mais les résultats restent bien décevants en comparaison et le plus souvent basés sur les textes identifiés dans les images.
Je trouve déjà la recherche « de base » très puissante et surtout ultra méconnue. J’étonne tout le temps mon entourage à retrouver en une minute une photo de peluche prise en 2014 ou d’une soirée en 2017 ^^
@Furious Angel
Pareil ! Également avec la recherche par lieu les gens hallucinent je leur dis ba t’as la même chose sur ton tel 😃
@tibcheshire
Oui en zoomant sur la carte c’est génial, ça permet de garder uniquement une selection. Très utile pour des photos de vacances ou dans des quartiers où on va peu.
Et aussi les recherches par personnes. Et par temporalité. Et le cumul de ces critères.
Je trouve dingue que ça soit si peu connu.
@Furious Angel
Yes pour le boulot aussi, je fais des installs chez des clients partout en France et super pratique pour retrouver les photos d’install par lieux, c’est hyper rapide et ça épate toujours 😃
Bref je vais tester l’app ça a l’air top et peut être un peu plus pousse si je cherche « baie de brassage » ou câblage réseau on verra 😊
@Furious Angel
La carte c’est clairement l’outil que j’utilise le plus pour retrouver une photo. Ça et le menu « personne »🙂
2,49 € en achat définitif.
Franchement, ce n’est pas (assez ?) cher.
J’avoue que ça à l’air vraiment sympa !
Quand vous dites que c’est moins bien en français ?
Ça donne quand même des résultats intéressants ou vraiment c’est moyen moyen ?🙂
@cecile_aelita
C’est nettement moins bien. Par exemple, « chaton » me renvoie des photos de chat sans distinction de leur âge, alors que « kitten » fonctionne correctement.
@nicolasf
Ok! Merci pour ce retour d’expérience en tout cas 🙂
« CLIP n’a pas besoin d’une bonne définition pour travailler, au contraire même, le moteur d’OpenAI fait son analyse sur des clichés de 224 px au maximum »
Est ce que ça veut dire que ça fonctionne même sans avoir stocké les « originaux » de sa photothèque (avec la fonction « phototheque optimisee »)?🙂
@cecile_aelita
C’est exactement ça que ça veut dire. 🙂
@nicolasf
C’est top ça !
Intéressant.
Est-ce que l'app sait reconnaitre les personnes qu'on a identifiées nous-même
Par exemple "Jean-Pierre laying in the sun"
@donatello
Non, parce que l’app n’a pas accès à ces données de Photos.
@nicolasf
Merci
Dommage, ce serait parfait avec cette fonction.
@donatello
C’est une limite imposée par Apple, je crois. Disons que le mieux serait que Photos améliore son moteur de recherche.
@nicolasf
Avant j'étais époustouflé par les recherches d'Apple (2010).
Aujourd'hui, ça en est presque ridicule !
@frankm
Est-ce qu'Apple utilisait déjà l'IA en 2010 ?
Est ce que l’app fonctionne si on a pas de chat ? Désolé je sors …
@Arnaud33
Je ne peux pas vous dire, car j’en ai un !
Mais ça peut être intéressant à savoir !
@cecile_aelita
Chat, pas chat... Schrödinger vous aurait démontré que c'est l'indéterminisme de la mesure de ce logiciel !
@jujulec
🤭 pas mal!
Je viens d'installer et sur mon iPhone 14 pro
Max il scanne 100 photos par seconde
@socotran77
C'est impressionnant l'air de rien, une tâche effectuée deux fois plus vite simplement d'une génération à la suivante…
Génial 👍
Vous avez été voir le site web du Dev? Moi ça ne m’inspire pas confiance…
@Norandy
J'ai non seulement été le voir, j'ai même mis un lien. Mais quel est le problème ?
@nicolasf
Sur l’AppStore, le site redirige vers Reddit et je n’ai pas réussi à y accéder depuis un smart phone
sur mac, ca fonctionne que dans photos ou sur un dossier de photos externe ou sur un disque par exemple ?
@quinzero
Que sur la photothèque gérée par Photos.
@nicolasf
Crotte, je cherche un catalogueur puissant pour un photographe.
Tri-calalogue a fermé ses portes, impossible de trouver quelque chose d'aussi efficace :(
Téléchargé et testé, je suis vraiment impressionné.
Cela marche également avec les descriptions de personnes et de vêtements. « guy with dark clothes » me sors bien toutes mes photos d’hommes habillées en sombre. C’est fou. « Blue eyes » également, c’est juste parfait.
A noter qu’il n’y a pas de censure… « ass with white lingerie » me sort bien les photos concernées de madame 😅🍑
Testé et supprimé
@frankm
???? so..
Photos est accroché sur le mur des pire fails d’Apple. Difficile de ne pas faire mieux.
Tim à l’époque totalement éblouie à l’annonce de l’AI dans Photos ! La révolution ! Awesome!
Tiens on dirait l’annonce pour Siri 🤔
@e2x
Moi j’aime bien les options de retouche de photo.
C’est rapide et facile 🙂.
Ça me correspond très bien pour mes usages !
Bonjour aux experts!
Comment une si petite application arrive à de tels résultats en local sans besoin de puissants serveurs ?
S’il faut si peu de lignes de code, pourquoi un tel outils n’est pas encore dispo sur les grosses plateformes ?
Si ce sont seulement des pb de droits, comment une telle appli est elle vendue si peu cher?
Merci pour vos retours!
Cordialement
@nicolasf
Merci pour la découverte de cette apps et le test. Belle découverte.
Sur l’article détaillé du site, ainsi que quelques retours sur l’AppStore, le minimum est un processeur A13 (iPhone 11). Cet article MacG m’a presque donné envie de tester sur un iPhone Xs, et son Apple A12 Bionic 🙃
(Petite coquille)
@Pyby
Oups désolé, je corrige de ce pas !
Est-ce que Queryable fonctionne bien sur Mac mini M1 et iPhone 12 mini ?
Y a-t-il d'autres logiciels pour utiliser m CLIP d’Open AI ?
Merci