À la traîne derrière Google Assistant, Siri s'améliore quand même

Mickaël Bazoge |

L’assistant le plus doué sur le marché demeure celui de Google, d’après la dernière étude de Loup Ventures. L’Assistant du moteur de recherche a répondu correctement à 85,5% des 800 questions posées par les testeurs de la maison d’analyses (il en a aussi compris 100%), c’est près de onze points de plus que lors de la précédente étude sur le sujet, en avril 2017.

Même si Siri a mauvaise presse, l’assistant d’Apple ne se sort finalement pas si mal de cette torture, avec un taux de réponses correctes de 78,5 % (+12 points par rapport à l’an dernier) et une compréhension de 99 %. Cortana suit derrière, loin derrière, avec 52,4 % pour l’exactitude des réponses et Alexa se traine entre les deux avec 61,4 % de bonnes réponses.

Dans ce genre de rapport, il est important de relever la méthodologie. Les analystes ont utilisé Siri avec un iPhone sous iOS 11.4, Google Assistant sur Pixel XL, Alexa et Cortana sur leurs apps iOS respectives, ce qui explique leurs performances en retrait1.

L’amélioration dans le temps de l’exactitude des réponses pour chaque assistant.

L’étude note que les assistants butaient souvent sur les noms propres, comme celui d’un restaurant ou d’une ville. Siri est un peu meilleur que ses concurrents concernant le contrôle du smartphone, de la domotique, de la musique. Google Assistant fait mieux que tout le monde sur tout ce qui touche à l’actualité.


  1. Loup Ventures propose le même genre de test pour les enceintes connectées, et les derniers résultats pour Siri étaient très mauvais. Une nouvelle fournée de ce test est attendue pour l’automne, on verra pour l’occasion ce que donneront les améliorations attendues sur le HomePod. ↩︎

avatar Lonesome Boy | 

« une compréhension de 99 % » pour Siri. Soit Siri est vraiment, mais alors vraiment, vraiment meilleur en anglais qu’en français, soit cette étude n’est pas crédible.

avatar brunnno | 

@Lonesome Boy

Tout à fait d’accord. Je pense que les test dépendent fortement de la langue.

avatar Lestat1886 | 

@Lonesome Boy

Oui Siri a toujours été meilleur en anglais

avatar Lonesome Boy | 

@Lestat1886

S’il arrive réellement à 99% en anglais, la différence est abyssale avec le français...

avatar lepoulpebaleine | 

@Lestat1886

Perso j’utilise Siri essentiellement en bagnole :
- pour dicter une note ou sms : ça passe bien
- pour lancer de la musique : catastrophe !

Je suis peut-être en plein délire mais j’ai trouvé une parade qui marche assez souvent : prononcer « en français » tous les mots, même anglais :
« Dis Siri, j’aimerai écouter la chanson é bohi é guirle de cheumichal broteurses ».

Vous confirmez, ou je dis n’importe quoi ?

avatar Lestat1886 | 

@lepoulpebaleine

Ca m’arrive aussi pour la musique, mais pas tout le temps... ou alors j’ai un gros accent français ?

avatar Vinyl | 

@Lonesome Boy

Je viens de demander à Siri quel était son taux de compréhension, résultat à côté de la plaque !

avatar Lonesome Boy | 

@Vinyl

????

avatar malcolmZ07 | 

@Lonesome Boy

Mon iPhone et Siri sont en anglais et je peux confirmer qu'il comprend très bien mes requêtes plus de 90% du temps.

avatar pagaupa | 

@malcolmZ07

« Mon iPhone et Siri sont en anglais et je peux confirmer qu'il comprend très bien mes requêtes plus de 90% du temps ».
Tu es anglais?

avatar malcolmZ07 | 

@pagaupa

Je ne vis plus dans un pays francophone depuis maintenant presque 3 ans , donc j'utilise l'anglais tous les jours ...

avatar Brice21 | 

@Lonesome Boy

Soit tu as un accent?

avatar Lonesome Boy | 

@Brice21

Évidemment ?Le plus du monde en plus ? Plus sérieusement, c’est sûr que je n’ai pas un accent pointu... Mais mon accent n’est pas très prononcé.

avatar elitelazor | 

Ce n'est pas parce qu'il n'a pas pu fournir la réponse qu'il n'a pas "compris" la question ? Il s'agit peut-être du taux de réussite de transcription vocale en texte compréhensible par Siri ? (Les 99%).

Après le taux de réponse positive c'est une autre histoire ... mais avec le recul Siri m'a toujours compris dans ma commande vocale on le voit surtout sur l'iPhone vu qu'on a le texte de notre commande sous les yeux, c'est toujours juste pour ma part.

avatar Vinyl | 

@elitelazor

C’est juste comme précision mais à quoi sert un taux de compréhension de 99% sans un taux de réponse correcte de 99% ? En pratique, je trouve Siri vraiment décevant. Je ne suis pas un fan de Google mais il faut avouer qu’ils sont vraiment en avance.

avatar elitelazor | 

@Vinyl

Moi aussi au final je veux un bon taux de réponses ! On est en accord là dessus. Depuis le HomePod j'utilise un peu plus Siri, mais la réalité est que plus je l'utilise et le test, plus la déception est grande c'est une cata. Je parle pas des bides lorsque j'ai pu faire différentes démos foireuses à des amis.
Bon heureusement je l'ai choisi pour la qualité du son, Apple Music et en guise d'enceinte externe de l'Apple TV4K pour le coup sur ces points c'est très satisfaisant.

avatar Brice21 | 

@elitelazor

Bravo tu as un taux de compréhension de 100% :)

avatar AppleDomoAdepte | 

Dans l’usage domotique, Siri est vraiment top sur la Watch, l’iPhone et HomePod.

Niveau musique, mes requêtes de bases sont comprises via HomePod.

Je n’ai pas de Google assistant donc je ne comparerai pas avec mais si je me tourne du côté d’Alexa, je dirai qu’elle est mieux pour les trucs à la con (dans le sens marrant pour faire rire les invités) : faire des bruits d’animaux, répondre à des questions de culture générale (même si Siri a bien appris ses pages Wikipedia), ...

Pour mon usage, je dois faire parti de la minorité satisfaite de Siri.

avatar armandgz123 | 

@AppleDomoAdepte

Perso quand je demande pour de la musique, ça marche 1 fois sur 8 (des morceaux qui sont dans le Top France) et encore ça ne fonctionne qu’avec Apple

avatar Aladdin | 

Espérant qu'il va faire moins de fautes de transcription
Écrit par Siri

avatar pagaupa | 

Il a intérêt à s’améliorer vite fait cat ce n’est pas les ventes d’homepod qui vont l’aider...
Pendant ce temps là, Alexa se place partout...

avatar malcolmZ07 | 

@pagaupa
Qu'est-ce que tu connais des ventes du homepod ?
C'est toi qui disait il y a un jour t'appuyer sur du factuel ?

avatar pagaupa | 

@malcolmZ07

Tu m’excuseras mais personne dans mon entourage n’en a acquis un contrairement aux autres enceintes connectées...
Ça c’est du factuel.

avatar Nesus | 

@pagaupa

Donc si je dis que tous les gens que je connais en ont acheté un (ce qui est un fait), dans quelle proportion est-ce que je peux affirmer que c’est un succès commercial ?

avatar ipaforalcus | 

@Nesus

Moi je connais personne qui est au courant de son existence et encore moins qui en a un...

avatar Brice21 | 

@ipaforalcus

Salut, je m’appelle Brice. J’ai 3 HomePods et je viens de faire basculer tes statistiques heuristiques de 100%.

avatar ipaforalcus | 

@Brice21

Et tu viens de Nice ? lol

avatar Brice21 | 

@ipaforalcus

Alors la tu m’as casséeeeeeeeee!

avatar Brice21 | 

@Nesus

Ca dépend du nombre de personnes que tu connais et de leur représentativité en terme d’échantillon Socio demographique.

avatar fifounet | 

@pagaupa

« Tu m’excuseras mais personne dans mon entourage n’en a acquis un contrairement aux autres enceintes connectées...
Ça c’est du factuel. »

Ha oui au fait les fameuses enceinte jean marie Reynaud tu sais ?
Ben aucun voisin a 10 km à la ronde n’en a
C’est factuel aussi ?

avatar SIMOMAX1512 | 

@pagaupa

Le HomePod vient de sortir . Et tes amis on peut être acheté les versions Google ou Amazon à moitié prix dans les 20-60 euros , le HomePod c’est une autre catégorie de prix qu’on achète pas sur un coup de tête pour se dire tient c’est pas cher je vais en prendre un pour essayer puis au final le laisser dans un coin ne plus l’utiliser . Par contre lui il aura toujours les micros bien ouvert ...

avatar Vinyl | 

Sans parler spécifiquement de Siri, je trouve que c’est la recherche en général qui est moins bonne. Exemple, Apple Music,si on ne saisit pas exactement le nom de l’artiste, aucun résultat. Sur Google (moteur de recherche), je peux faire une requête bourrée de fautes avec des mots collés et la requête est corrigée et comprise. Idem la recherche sur iPhone, dans fichier, dans plan, etc. Trop souvent frustrant de ne pas avoir un résultat correct. C’est la que je vois le retard pris par Apple. Comme je disais dans un commentaire précédent, je ne suis pas pro Google vu leur système de collecte de données. Mais sur ces points, il faut avouer qu’ils sont nettement en avance.

avatar webHAL1 | 

@Vinyl
« Sur Google (moteur de recherche), je peux faire une requête bourrée de fautes avec des mots collés et la requête est corrigée et comprise. »

Je te rejoins totalement. C'est aussi quelque chose qui régulièrement m'épate avec la recherche dans les outils de Google : à quel point elle est "intelligente".
C'est une de leurs grandes forces ! :-)

avatar lepoulpebaleine | 

@webHAL1
@Vinyl

+1 pour la tolérance aux fautes du moteur de Google. On peut le comparer à n’importe quoi, il est vraiment très très loin au dessus des autres.

avatar DarKOrange | 

Il est bon de préciser qu’il s’agit de Siri en anglais... car il y a un monde entre le Siri anglais et le Siri français et ce au désavantage du dernier !

avatar gillesb14 | 

Pas plus tard que cet après midi!

Je voudrais écouter l’album de deep purple.

Réponse : vous voulez appeler Denis Perrin?

Autre question : Envoyer un message à Anne Marie

Que voulez vous dire à André Marion ?

Siri est une daube infâme, c’est limite de l’escroquerie

avatar lepoulpebaleine | 

@gillesb14

Il suffit de dire « dipeux peurpeule » ! ??
PS - J’ai le même problème... tout le temps pour la musique.

avatar Brice21 | 

@gillesb14

Donne des surnoms bien distincts à tes contacts.

avatar matrixfr | 

Pour la Domotique (Philips hue) j’ai galéré pendant 3 jours avec les HomeKit et le HomePod avant d’abandonner et passer sur mon enceinte écho ... et la 5 minutes le temps d’installer le skills hue et tout reste fonctionne du 1er coup, contrôle total avec alexa de mon installation ... résultat mon HomePod me sert juste a passer de la musique ... un peu décevant pour le coup même si il le fait bien...

avatar lepoulpebaleine | 

Pour défendre un peu le pauvre Siri : questionnez le sur le côté obscur de la force et sur son éventuelle attirance pour ce côté obscur. Insistez un peu. Au bout de 5 à 6 questions, vous devriez avoir une bonne petite blague !

avatar wakior | 

Je trouve Siri encore plus nul que l’année dernière.
Sur mon iPhone 7 il est devenu trop long à réagir, se trompe presque systématiquement, répond complètement à côté. Et une fois sur deux si je lui demande d’appeler par exemple "toto" il me répond 1 minutes après : je trouve pas toto voulait vous dire toto " ?????
Du coup quand je vois une étude comme ça pour moi ça n’a aucune crédibilité.

CONNEXION UTILISATEUR