Pendant treize jours d’août, 1 129 visiteurs automatiques se sont présentés sur notre site comme des assistants IA venus chercher une page pour un humain. Nous avons demandé leurs papiers. La vérification du trafic IA consiste à confronter cette déclaration aux plages d’adresses publiées et à la résolution inverse. Chez Fast Growth Advisors, aucun chiffre de visibilité IA n’est produit autrement.
876 mentaient.
Ce chiffre change la lecture de tout ce que vous croyez savoir sur votre trafic IA. Y compris, peut-être, des statistiques publiées par les plus gros acteurs du marché.
Une ligne de texte n’est pas une identité
Chaque visiteur automatique annonce qui il est en arrivant sur un serveur. Cette annonce s’appelle le user-agent, et c’est une ligne de texte que le visiteur écrit lui-même.
Rien, techniquement, ne l’empêche d’y mettre « Googlebot » ou « ChatGPT-User ».
La quasi-totalité des outils de mesure comptent cette ligne et s’arrêtent là. Les grands chiffres publiés sur le crawl IA, ratios d’aspiration, taux d’erreur, parts de trafic, sont calculés sur elle.
Or il existe un moyen de vérifier. Google, OpenAI, Microsoft et d’autres publient les plages d’adresses depuis lesquelles leurs robots opèrent, ou un mécanisme de résolution inverse qui permet de confirmer l’identité dans les deux sens. La vérification est publique, documentée, gratuite.
Nous l’avons appliquée à chaque requête de nos journaux serveur, sur deux sites, du 11 au 23 août.
Chaque visiteur automatique a reçu un verdict : authentifié, usurpation prouvée, invérifiable, ou non tranché.
Sept Googlebot sur soixante-sept
Premier résultat, le plus simple à raconter : 67 adresses distinctes se déclaraient Googlebot sur notre site principal. Sept appartenaient à Google.
Les soixante autres ?
Des machines louées chez des hébergeurs grand public, duckdns.org et digivps.com entre autres. N’importe qui peut louer un serveur et écrire « Googlebot » dans son en-tête. Beaucoup le font : le déguisement ouvre des portes que les pare-feux ferment aux anonymes.
Sur notre second site, 20 adresses se déclaraient Googlebot. Les sept authentiques étaient les mêmes.
L’écart entre les deux sites ne vient pas de la méthode : c’est une mesure de l’exposition de chaque site aux imposteurs. Un chiffre de contrôle qui contrôle vraiment quelque chose.
Le taux d’erreur appartient aux imposteurs
Le résultat central de ces treize jours tient dans la catégorie la plus sensible : les requêtes se présentant comme une IA venue chercher une page à la demande d’un humain, le trafic dont tout le monde veut la courbe.
Sur 1 129 requêtes déclarées, 154 étaient authentifiées, 876 étaient des usurpations prouvées, le reste étant invérifiable ou non tranché. Trois lectures du même trafic :
Les authentifiées trouvent leur page dans 99,4 % des cas. Aucune ne tombe sur une page inexistante.
Les usurpations tombent sur une page inexistante 69,1 % du temps. Elles tâtonnent, sondent, cherchent des failles plus que des contenus.
Tous verdicts confondus, la lecture que produirait n’importe quel outil classique : 53,7 % d’erreurs.
Vercel, dans l’étude de référence sur les crawlers IA, publie 34,82 % de pages inexistantes pour ChatGPT et 34,16 % pour Claude. Des chiffres du même ordre que notre total non filtré. Jamais du même monde que nos requêtes authentifiées.
D’où une hypothèse, que nous donnons comme une hypothèse : le gaspillage de crawl attribué aux IA mesure peut-être, pour une large part, des acteurs qui se font passer pour elles. Nous n’affirmons rien de la méthode des autres. Nous montrons que sur nos serveurs, l’écart entre les deux lectures est de 53,7 points.
Que change la vérification, chiffre par chiffre ?
Le même trafic, lu de deux façons. À gauche ce qu’un outil classique affiche, en additionnant les déclarations. À droite ce que donne la vérification d’identité, requête par requête, sur les fetchs IA de fast-growth.fr pendant la fenêtre.
| Verdict | Requêtes | Pages trouvées | Pages inexistantes |
|---|---|---|---|
| Authentifié | 154 | 99,4 % | 0,0 % |
| Non vérifié | 99 | 87,9 % | 1,0 % |
| Usurpation prouvée | 876 | 30,7 % | 69,1 % |
| Tous verdicts confondus | 1 129 | n.s. | 53,7 % |
Les requêtes authentifiées ne se trompent pas de porte : aucune page inexistante sur 154 requêtes. Les usurpations, elles, tâtonnent, avec 69,1 % de requêtes vers des pages qui n’existent pas. Et le total, seule lecture qu’un outil non vérifiant puisse produire, affiche 53,7 % d’erreurs. L’écart entre les deux lectures atteint 53,7 points.
La méthode complète, les quatre verdicts, la décomposition par classe de robot sur deux sites et les limites de notre propre instrument sont dans le livre blanc : Compter des robots, pas des mensonges, en accès libre, avec sa version PDF.
Ce qu’il faut dire pour être honnête
Tout ce qui n’est pas vérifié n’est pas frauduleux, et la distinction mérite d’être faite avec soin.
ClaudeBot, le robot d’Anthropic, ne peut pas être authentifié : son éditeur ne publie ni plage d’adresses ni enregistrement inverse. C’est un robot invérifiable, pas un imposteur, et nos comptages le rangent dans une colonne séparée des usurpations prouvées. Même statut pour DuckDuckGo. La vraie question, que nous laissons ouverte, est de savoir pourquoi certains éditeurs publient de quoi les vérifier et d’autres non.
Nos mesures et notre instrument ont leurs limites, et nous préférons les écrire avant qu’on nous les trouve.
Sur notre site principal, 12 % du trafic d’agents IA provient en réalité d’un seul robot. Pour celui-là, la vérification n’a pas abouti alors qu’elle aurait dû être possible. Nous ne l’avons pas encore élucidé. Ces requêtes sont comptées à part.
Ni authentifiées, ni accusées.
Et nos volumes sont ce qu’ils sont : 154 requêtes authentifiées sur treize jours, deux sites de PME. Nous ne prétendons pas décrire le web. Nous décrivons une méthode, et ce qu’elle change aux chiffres quand on l’applique. Un lecteur qui refait la mesure sur ses propres journaux trouvera d’autres proportions, mais il retrouvera le même écart entre ce que les robots déclarent et ce que la vérification confirme.
Un canal d’acquisition faux à 88,9 %
La vérification d’identité n’est pas le seul endroit où un tableau de bord ment par construction. Pendant la même fenêtre, la catégorie « referral », le trafic censé venir d’autres sites, pesait 12 087 requêtes dans nos journaux.
10 740 d’entre elles, soit 88,9 %, étaient de la navigation interne : un visiteur déjà sur le site cliquant vers une autre page du site.
Le quatrième canal d’acquisition de l’écran de mesure n’était pas un canal d’acquisition.
Combien de referrals IA authentiques dans le lot ? Quatre.
Avec la réserve d’usage, qui vaut pour tous les outils du marché : les applications natives de ChatGPT ou Claude n’envoient pas d’en-tête de provenance, donc ce trafic est structurellement sous-compté. Un « zéro referral IA » affiché par un outil n’est pas un fait, c’est un angle mort.
La question à poser
Vous n’avez pas besoin de reproduire notre dispositif pour agir. Une seule question à votre outil de mesure, ou au prestataire qui vous vend un rapport de visibilité IA, suffit à situer ce que valent ses chiffres.
Sur quoi repose l’identification des robots ?
Si la réponse est « le user-agent », vous savez désormais ce que vous lisez. Un volume de trafic IA qui peut être majoritairement faux, un taux d’erreur qui n’est pas le vôtre, et des décisions de budget contenu prises pour des visiteurs qui n’existent pas.
Un compteur qui ne vérifie pas l’identité ne compte pas des robots. Il compte des lignes de texte que n’importe qui peut écrire.
Sources
- Vercel et MERJ (cabinet d’analyse d’audience). The rise of the AI crawler, 17 décembre 2024. Étude de référence sur les crawlers IA : 34,82 % de pages inexistantes pour ChatGPT et 34,16 % pour Claude, contre 8,22 % pour Googlebot. vercel.com
- Mécanismes de vérification publics des robots : plages d’adresses IP (Internet Protocol) publiées et résolution DNS (Domain Name System) inverse dans les deux sens, documentées par Google (vérification de Googlebot), OpenAI (user-agents et plages GPTBot / OAI-SearchBot / ChatGPT-User) et Microsoft. URLs primaires à poser à l’intégration.
- Fast Growth Advisors. Mesure propre sur journaux serveur, deux sites, du 11 au 23 août 2026 : 1 129 requêtes déclarées agents IA (154 authentifiées, 876 usurpations prouvées) ; 67 et 20 adresses « Googlebot » dont 7 authentiques de part et d’autre ; catégorie referral 12 087 requêtes dont 10 740 de navigation interne et 4 referrals IA authentiques. Méthode et tableaux complets dans le livre blanc associé.
FAQ
Comment un robot IA prouve-t-il son identité, et pourquoi le user-agent ne suffit-il pas ?
Le user-agent est une simple ligne de texte que le visiteur écrit lui-même en arrivant sur un serveur, et rien ne l’empêche d’y inscrire « Googlebot » ou « ChatGPT-User ». La preuve d’identité passe par un autre canal : les plages d’adresses IP publiées par les éditeurs, ou une résolution DNS inverse qui confirme l’origine dans les deux sens. Sur nos journaux, 67 adresses se déclaraient Googlebot et sept seulement appartenaient à Google.
Pourquoi mon taux d’erreur de crawl IA est-il peut-être faux ?
Parce qu’un outil qui ne vérifie pas l’identité additionne les vrais robots et les imposteurs. Sur notre site, les requêtes IA authentifiées trouvaient leur page dans 99,4 % des cas, alors que les usurpations tombaient sur une page inexistante 69,1 % du temps. Tous verdicts confondus, la lecture atteignait 53,7 % d’erreurs, un chiffre porté par les imposteurs, pas par les moteurs. Le taux d’erreur souvent attribué aux IA mesure peut-être, pour une part, des acteurs qui se font passer pour elles.
ClaudeBot est-il un imposteur puisqu’il n’est pas authentifiable ?
Non, et la distinction est importante. ClaudeBot ne peut pas être authentifié parce qu’Anthropic ne publie ni plage d’adresses ni enregistrement inverse, mais un robot invérifiable n’est pas une usurpation prouvée. Nos comptages le rangent dans une colonne séparée, comme DuckDuckGo. La seule question ouverte est de savoir pourquoi certains éditeurs fournissent de quoi les vérifier et d’autres non.
Comment savoir ce que vaut un rapport de visibilité IA ?
Posez une seule question à votre outil ou à votre prestataire : sur quoi repose l’identification des robots ? Si la réponse est « le user-agent », le volume de trafic IA annoncé peut être majoritairement faux et le taux d’erreur n’est pas le vôtre. Vérifiez aussi comment est comptée la catégorie referral, souvent gonflée par la navigation interne, et gardez en tête que les applications natives de ChatGPT ou Claude n’envoient pas d’en-tête de provenance, ce qui sous-compte structurellement les vraies visites IA.
