Comprobador de robots.txt y sitemap
robots.txt & Sitemap Checker
Descarga el robots.txt y el sitemap, comprueba si una URL es rastreable y valida el formato del sitemap.
Descarga el robots.txt y el sitemap de un sitio, y luego dictamina si una ruta dada es rastreable — por rastreador, mostrando qué grupo y qué regla lo decidieron. Responde «por qué esta página no está indexada» en la única capa que bloquea todo lo demás en silencio.
Nuestro servidor hace esta solicitud por ti. Solo se le envía la URL que escribiste: ninguna de tus cookies ni tu sesión iniciada viaja con ella. El servidor solo se conecta a direcciones públicas y rechaza las privadas e internas.
Cómo se usa
Pega la URL de la página, no el dominio
La ruta es lo que se juzga. El robots.txt se descarga automáticamente del host de esa URL.
Lee el veredicto por rastreador
Googlebot, Bingbot, los rastreadores de IA y cualquier User-agent que añadas se juzgan por separado, porque robots.txt los agrupa por separado. La regla que decide se muestra con su número de línea.
Revisa el sitemap junto a él
El sitemap se descarga de la línea Sitemap:, o de /sitemap.xml si no hay ninguna, y se listan sus entradas y sus problemas. Un sitemap que devuelve 404 es lo que Search Console informa como no recuperable.
Preguntas frecuentes
¿El robots.txt saca una página de los resultados de búsqueda?
No: detiene el rastreo, no el listado. Una URL bloqueada a la que enlazan otros sitios puede seguir apareciendo, sin descripción, porque al rastreador se le prohíbe leer el noindex que le pusiste. Para quitar una página, permite el rastreo y sirve noindex.
Mi robots.txt devuelve un 500: ¿importa?
Mucho. Según el RFC 9309 un 5xx significa que el archivo no está disponible, y un rastreador trata el sitio entero como prohibido en lugar de suponer lo mejor. Un error de servidor en este único archivo puede sacar un sitio entero de la búsqueda.
Dos reglas coinciden con mi ruta: ¿cuál gana?
La coincidencia más larga, y Allow gana un empate (RFC 9309 §2.2.2). La tabla nombra la regla que decidió de verdad, que suele ser la sorpresa.
¿Los rastreadores obedecen esto de verdad?
Los que tienen nombre, sí. robots.txt es una convención, no un control de acceso: cualquier cosa que lo ignore descargará la página igual, así que una ruta que no debe ser pública necesita autenticación y no una línea Disallow.
Puede recibir de
Depurador de vistas previas de enlaces
Link Preview Debugger
Lee las etiquetas de Open Graph y de tarjeta de Twitter de una URL y dibuja cómo se verá el enlace al compartirlo.
Detector de enlaces rotos
Broken Link Checker
Extrae hasta cien enlaces de una página, o toma una lista pegada, y comprueba cada uno en paralelo —estado, destino de la redirección y tiempo de respuesta— pidiendo primero HEAD y volviendo a GET si se lo rechazan.
Consulta WHOIS
WHOIS Lookup
Muestra los datos de registro de un dominio, el registrador, los servidores de nombres y la fecha de vencimiento, además de los datos RDAP donde existan.
Lector de códigos QR y de barras
QR & Barcode Reader
Lee códigos QR y los códigos de barras habituales desde una imagen que subas, una captura de pantalla o la cámara.
Después
Estas aceptan lo que produce esta herramienta, así que el resultado puede pasar directamente.
Inspector de cabeceras HTTP
HTTP Header Inspector
Pide una URL y muestra las cabeceras de respuesta completas, la cadena de redirecciones, los tiempos y la compresión usada.
Detector de enlaces rotos
Broken Link Checker
Extrae hasta cien enlaces de una página, o toma una lista pegada, y comprueba cada uno en paralelo —estado, destino de la redirección y tiempo de respuesta— pidiendo primero HEAD y volviendo a GET si se lo rechazan.
Depurador de vistas previas de enlaces
Link Preview Debugger
Lee las etiquetas de Open Graph y de tarjeta de Twitter de una URL y dibuja cómo se verá el enlace al compartirlo.
Constructor de peticiones HTTP
HTTP Request Builder
Compone y envía una petición GET, POST, PUT, PATCH, DELETE o HEAD con cabeceras y cuerpo propios, y muestra el estado, las cabeceras, el cuerpo y el tiempo, sin reenviar nunca Cookie ni Authorization.
Generador de códigos de barras
Barcode Generator
Genera códigos EAN-13, UPC, Code128, Code39 e ITF con dígito de control y una salida lista para imprimir.
Limpiador de CSV
CSV Cleaner
Recorta los espacios de las celdas, uniforma los encabezados, arregla los formatos de número y fecha y avisa de las filas con un número de columnas equivocado.