Les robots d'IA peuvent-ils lire votre site ? Audit robots.txt pour 48 bots IA connus — comparé côte à côte avec les domaines concurrents.
Audit statique du robots.txt : ce que vos règles autorisent ou bloquent, avant toute visite de crawler.
Audit du robots.txt…
La liste des bots et les catégories reposent sur la documentation publique des user-agents : la liste communautaire ai.robots.txt, Dark Visitors et la doc de chaque opérateur. ai.robots.txt · Dark Visitors