Comment utiliser le crawler
- 1
Connectez-vous avec votre compte Google. Le crawler est gratuit ; la connexion est la seule condition.
- 2
Saisissez l’adresse de départ, en général votre page d’accueil, par exemple https://example.com.
- 3
Lancez l’exploration. Il lit la page de départ, puis suit les liens vers les autres pages du même nom d’hôte, une par une, jusqu’à 100 pages ou jusqu’à ce qu’il n’y ait plus de liens.
- 4
Consultez le résumé et le tableau, puis exportez le rapport en CSV pour le trier et le filtrer dans un tableur.
Ce que le crawler vérifie
Pour chaque page lue, le rapport indique : • le code de statut HTTP (200 est correct ; 4xx et 5xx sont des erreurs) ; • le titre et sa longueur, signalé trop court sous 30 caractères et trop long au-delà de 60 ; • la meta description et sa longueur, trop courte sous 70 caractères et trop longue au-delà de 160 ; • le nombre de titres H1 (un par page est l’objectif habituel) ; • le nombre d’images sans texte alternatif ; • le nombre de liens internes et externes ; • le poids du HTML et le temps de chargement. Le résumé additionne les titres, descriptions et H1 manquants, les images sans alt et les pages en erreur.
Ce qu’il ne vérifie pas
Le crawler lit le HTML envoyé par votre serveur. Il n’exécute pas JavaScript : un contenu qui n’apparaît qu’après l’exécution de scripts lui échappe. Il ne lit ni le robots.txt ni votre sitemap XML, ne suit que les liens du nom d’hôte exact saisi (www.example.com et example.com comptent comme deux sites) et s’arrête à 100 pages. Voyez-le comme un contrôle rapide des bases on-page, pas comme un audit technique complet : l’indexation, les balises canonical, hreflang et les Core Web Vitals se vérifient avec d’autres outils, comme Google Search Console.
Questions fréquentes
Le crawler est-il vraiment gratuit ?
Oui. Aucun frais, aucune carte. Il suffit de vous connecter avec un compte Google pour lancer une exploration.
Pourquoi a-t-il lu moins de 100 pages ?
Il ne trouve que les pages liées depuis des pages déjà lues, sur le même nom d’hôte. Les pages liées uniquement depuis des menus JavaScript, présentes seulement dans le sitemap ou liées nulle part ne seront pas trouvées. Les pages qui ne se chargent pas en 10 secondes sont ignorées.
Quelle longueur pour les titres et les meta descriptions ?
Le rapport juge bons les titres de 30 à 60 caractères et les descriptions de 70 à 160. Ce sont des repères courants, pas des règles : Google tronque les extraits selon leur largeur en pixels et les réécrit parfois. Écrivez pour l’internaute et placez les mots importants au début.
Puis-je explorer un site qui ne m’appartient pas ?
Le crawler lit les pages publiques comme le ferait un navigateur. N’explorez que des sites qui vous appartiennent ou que vous êtes autorisé à vérifier, et gardez à l’esprit que chaque exploration envoie jusqu’à 100 requêtes à ce site.
Montre-t-il mes pages comme Googlebot les voit ?
Pas tout à fait. Il lit le HTML envoyé par votre serveur, c’est-à-dire ce que Googlebot récupère en premier, mais il n’exécute pas JavaScript comme le moteur de rendu de Google. Pour voir le rendu de Google, utilisez l’outil d’inspection d’URL de Google Search Console et ouvrez « Afficher la page explorée ».