Méthode · · 2 min de lecture

On vous annonce +50 % de visibilité dans ChatGPT ?

Avant de vous réjouir, posez une question simple : comment est-ce mesuré ?

Rien n’a changé, et pourtant

Lundi, on pose 10 fois la même question à ChatGPT : votre marque est citée 4 fois. Mardi, on recommence : 6 fois. Rien n’a changé entre les deux. Pourtant, dans un rapport, ça s’écrit « +50 % ».

Ce n’est pas un accident, c’est le fonctionnement normal de ces outils. Posée plusieurs fois le même jour, une même question ne donne pas les mêmes marques, au point qu’une mesure unique est pratiquement inutilisable, selon une étude de l’université de Saint-Gall (2026). Après une campagne, un tel écart ne prouve donc rien.

Ce n’est pas la seule source de variation

Prenez un film qui sort le mois prochain : il n’est pas encore dans la mémoire de votre IA favorite. Demandez-lui les thrillers de l’automne. Elle peut répondre de mémoire, et ne pas le citer. Ou chercher sur le web, et tout dépend des pages disponibles ce jour-là.

Dix réponses à une seule question, c’est un sondage auprès de dix personnes. Les études récentes convergent : il faut répéter, varier les questions et observer dans la durée.

Notre protocole

Chez Reflets, c’est ce que nos clients nous demandent : savoir ce qui a vraiment changé entre avant et après une campagne.

  • Des dizaines de questions, 10 fois chacune, à chaque IA. On ne conclut jamais sur une question, seulement sur l’ensemble.
  • Pour chaque réponse, on sait si l’IA a cherché sur le web.
  • Chaque mesure est refaite à 24 heures. Si les deux divergent, on ne conclut pas.
  • Et on recommence toutes les deux semaines.

Le sujet n’est pas de savoir s’il faut mesurer la visibilité dans les IA. Le sujet, c’est de ne pas présenter du bruit comme un résultat.

Portrait d’Yvan Forestier

Yvan ForestierCofondateur de Reflets

Parlons de ce qui vous prend du temps.

Un appel de 30 minutes, en visio, à réserver dans notre agenda.

Nous contacter