Vérificateur robots.txt et sitemap
robots.txt & Sitemap Checker
Récupère le robots.txt et le sitemap, teste si une adresse est explorable et contrôle la validité du format du sitemap.
Récupère le robots.txt et le sitemap d’un site, puis tranche sur le fait qu’un chemin donné est explorable — par robot, en montrant quel groupe et quelle règle l’ont décidé. Il répond à « pourquoi cette page n’est-elle pas indexée » à la seule couche qui bloque tout le reste en silence.
C’est notre serveur qui fait cette requête pour vous. Nous ne lui transmettons que l’URL que vous avez saisie — aucun de vos cookies ni votre session ne part avec. Le serveur ne se connecte qu’à des adresses publiques et refuse les adresses privées et internes.
Comment s’en servir
Collez l’URL de la page, pas le domaine
C’est le chemin qui est jugé. Le robots.txt est récupéré automatiquement depuis l’hôte de cette URL.
Lisez le verdict par robot
Googlebot, Bingbot, les robots d’IA et tout User-agent que vous ajoutez sont jugés séparément, parce que robots.txt les groupe séparément. La règle décisive est affichée avec son numéro de ligne.
Vérifiez le sitemap en même temps
Le sitemap est récupéré depuis la ligne Sitemap:, ou depuis /sitemap.xml s’il n’y en a pas, et ses entrées et ses problèmes sont listés. Un sitemap qui renvoie 404 est ce que la Search Console signale comme non récupérable.
Questions fréquentes
Le robots.txt empêche-t-il une page d’apparaître dans les résultats ?
Non : il arrête l’exploration, pas le référencement. Une URL bloquée vers laquelle d’autres sites pointent peut quand même apparaître, sans description, parce qu’il est interdit au robot de lire le noindex que vous y avez mis. Pour retirer une page, autorisez l’exploration et servez un noindex.
Mon robots.txt renvoie une 500 — est-ce grave ?
Beaucoup. Selon la RFC 9309, un 5xx veut dire que le fichier est indisponible, et un robot traite alors tout le site comme interdit plutôt que de supposer le meilleur. Une erreur serveur sur ce seul fichier peut sortir un site entier de la recherche.
Deux règles correspondent à mon chemin — laquelle l’emporte ?
La correspondance la plus longue, et Allow l’emporte en cas d’égalité (RFC 9309 §2.2.2). Le tableau nomme la règle qui a réellement décidé, ce qui est en général la surprise.
Les robots obéissent-ils vraiment à cela ?
Les robots nommés, oui. robots.txt est une convention, pas un contrôle d’accès — ce qui l’ignore ira chercher la page quoi qu’il arrive, donc un chemin qui ne doit pas être public a besoin d’une authentification et non d’une ligne Disallow.
À alimenter depuis
Aperçu de partage de lien
Link Preview Debugger
Lit les balises Open Graph et Twitter card d’une adresse et montre l’allure qu’aura le lien une fois partagé.
Détecteur de liens morts
Broken Link Checker
Extrait jusqu’à cent liens d’une page, ou prend une liste collée, et contrôle chacun en parallèle — statut, cible de redirection et temps de réponse, en HEAD d’abord puis en GET si l’on refuse.
Recherche WHOIS
WHOIS Lookup
Affiche la déclaration d’un domaine, son bureau d’enregistrement, ses serveurs de noms et sa date d’expiration, ainsi que les données RDAP lorsqu’elles existent.
Lecteur de QR codes et de codes-barres
QR & Barcode Reader
Lit les QR codes et les codes-barres courants depuis une image, une capture d’écran ou la caméra.
Ensuite
Ces outils acceptent ce que celui-ci produit : le résultat peut y aller directement.
Inspecteur d’en-têtes HTTP
HTTP Header Inspector
Interroge une adresse et montre les en-têtes de réponse complets, la chaîne de redirections, les temps de réponse et la compression employée.
Détecteur de liens morts
Broken Link Checker
Extrait jusqu’à cent liens d’une page, ou prend une liste collée, et contrôle chacun en parallèle — statut, cible de redirection et temps de réponse, en HEAD d’abord puis en GET si l’on refuse.
Aperçu de partage de lien
Link Preview Debugger
Lit les balises Open Graph et Twitter card d’une adresse et montre l’allure qu’aura le lien une fois partagé.
Constructeur de requêtes HTTP
HTTP Request Builder
Compose et envoie une requête GET, POST, PUT, PATCH, DELETE ou HEAD avec en-têtes et corps personnalisés, et montre le statut, les en-têtes, le corps et le temps de réponse — sans jamais transmettre de cookies ni d’en-tête Authorization.
Générateur de codes-barres
Barcode Generator
Produit des codes-barres EAN-13, UPC, Code128, Code39 et ITF avec leurs clés de contrôle, dans une sortie prête à imprimer.
Nettoyeur de CSV
CSV Cleaner
Rogne les cellules, normalise les en-têtes, redresse les formats de nombre et de date et signale les lignes qui n’ont pas le bon nombre de colonnes.