Comment aeoda mesure la visibilité IA

Ce qui compose le score

L’unité de mesure est une question qu’un acheteur pourrait poser. Nous générons des questions de catégorie et des questions de problème, sans le nom de la marque. Les questions contenant le nom de la marque sont traitées à part, car elles gonfleraient le score.

Chaque question est posée à chaque moteur une ou plusieurs fois. Pour chaque moteur, nous enregistrons la part des exécutions qui citent la marque. La valeur de la question est la moyenne des moteurs ayant renvoyé des données.

La formule

Score = 100 × la moyenne pondérée des valeurs des questions. Les moteurs web en direct comptent avec un poids de 1 et les moteurs à connaissance du modèle avec un poids de 0,5. Le score d’un moteur utilise la même formule avec un seul moteur.

Les autres indicateurs suivent la même logique : la part de voix correspond à vos mentions divisées par l’ensemble des mentions de marques, la position moyenne à votre rang parmi les marques citées dans une réponse, et le sentiment va de -1 à +1.

L’intervalle de confiance

Les réponses de l’IA varient d’une exécution à l’autre : une mesure est donc un échantillon, pas un fait. Nous estimons l’erreur-type sur l’ensemble des questions, qui rend compte à la fois de la variance entre questions et entre exécutions, et nous publions un intervalle de confiance à 90 % autour du score.

Avec moins de cinq questions, le résultat est marqué comme un aperçu, avec un intervalle large. Plus de questions et plus d’exécutions resserrent l’intervalle.

Quand un changement compte

Une hausse ou une baisse n’est affichée que si elle dépasse l’incertitude combinée des deux mesures. Sinon, nous indiquons que la variation reste dans le bruit de mesure. Nos e-mails n’annoncent jamais une hausse ou une baisse du score sans cette vérification.

Étiquettes des moteurs

ChatGPT et Claude répondent avec recherche web en direct et sont étiquetés web en direct. Gemini est mesuré sans recherche en direct et étiqueté connaissance du modèle, car il reflète ce que le modèle sait par lui-même.

Les AI Overviews de Google ne sont pas mesurées.

Les limites à connaître

Nous interrogeons les moteurs via leurs interfaces officielles. Les réponses peuvent différer de ce que voient les gens dans les applications grand public : les résultats sont des observations via API, pas un recensement de toutes les conversations des utilisateurs.

Les résultats dépendent du jeu de questions, du marché et de la langue. Nous publions la méthode pour que vous puissiez en juger, et nous continuons de l’affiner au fil de nos mesures.

Une mention n’est pas une vente. Le score indique si l’IA inclut une marque dans ses réponses, pas si ces réponses convertissent.