Passage des robots : l’IA vient-elle lire le site ?
Vérifier que les robots d’IA visitent réellement les pages — la condition préalable à toute citation.
Autoriser les robots d’IA dans le robots.txt ne garantit pas qu’ils viennent. Google Analytics ne peut pas le dire : les robots n’exécutent pas de JavaScript. Cet écran le mesure.
Trois façons de mesurer
Une ligne à coller dans l’en-tête du site du client. Elle ne réagit qu’aux robots d’IA, sans cookie ni donnée personnelle.
Si le site passe par Cloudflare, connectez un jeton en lecture seule : c’est la source la plus complète, elle voit les requêtes avant le site.
Déposez un export Apache/Nginx (« combined ») ou un export JSON de CDN, pour une analyse ponctuelle.
Ce que vous y lisez
Quels robots sont venus, combien de fois, sur quelles pages — et surtout ceux qui sont autorisés mais jamais venus. La porte est ouverte et ils n’entrent pas : sans passage, aucune citation n’est possible.