Verificador de robots.txt e sitemap
robots.txt & Sitemap Checker
Busca o robots.txt e o sitemap, testa se uma URL pode ser rastreada e valida o formato do sitemap.
Busca o robots.txt e o sitemap de um site e depois decide se um dado caminho é rastreável — por rastreador, mostrando qual grupo e qual regra decidiram. Responde “por que esta página não está indexada” na única camada que bloqueia todo o resto em silêncio.
Nosso servidor faz esta requisição por você. Enviamos a ele apenas a URL que você digitou — nenhum dos seus cookies nem seu login vai junto. O servidor só se conecta a endereços públicos e recusa os privados e internos.
Como usar
Cole a URL da página, não o domínio
O caminho é o que é julgado. O robots.txt é buscado automaticamente do host dessa URL.
Leia o veredito por rastreador
Googlebot, Bingbot, os rastreadores de IA e qualquer User-agent que você adicionar são julgados separadamente, porque o robots.txt os agrupa separadamente. A regra decisiva aparece com o número da linha.
Confira o sitemap junto
O sitemap é buscado da linha Sitemap:, ou de /sitemap.xml se não houver nenhuma, e suas entradas e problemas são listados. Um sitemap que devolve 404 é o que o Search Console relata como impossível de buscar.
Perguntas frequentes
O robots.txt tira uma página dos resultados de busca?
Não — ele impede o rastreamento, não a listagem. Uma URL bloqueada para a qual outros sites apontam ainda pode aparecer, sem descrição, porque o rastreador está proibido de ler o noindex que você colocou nela. Para remover uma página, permita o rastreamento e sirva noindex.
Meu robots.txt devolve 500 — isso importa?
Muito. Pela RFC 9309, um 5xx significa que o arquivo está indisponível, e um rastreador trata o site inteiro como proibido em vez de presumir o melhor. Um erro de servidor nesse único arquivo pode tirar um site inteiro da busca.
Duas regras batem com o meu caminho — qual vence?
A correspondência mais longa, e Allow vence o empate (RFC 9309 §2.2.2). A tabela nomeia a regra que de fato decidiu, que costuma ser a surpresa.
Os rastreadores obedecem mesmo a isso?
Os nomeados obedecem. O robots.txt é uma convenção, não um controle de acesso — qualquer coisa que o ignore busca a página do mesmo jeito, então um caminho que não pode ser público precisa de autenticação, não de uma linha Disallow.
Pode receber de
Depurador de prévia de link
Link Preview Debugger
Lê as tags Open Graph e Twitter Card de uma URL e renderiza como o link vai aparecer ao ser compartilhado.
Verificador de links quebrados
Broken Link Checker
Extrai até 100 links de uma página, ou recebe uma lista colada, e verifica cada um em paralelo — status, destino do redirecionamento e tempo de resposta, HEAD primeiro e GET quando recusado.
Consulta WHOIS
WHOIS Lookup
Mostra o registro do domínio, o registrador, os servidores de nome e a expiração, mais os dados RDAP onde existirem.
Leitor de QR code e código de barras
QR & Barcode Reader
Lê QR codes e os códigos de barras mais comuns de uma imagem enviada, de um print ou da câmera.
Em seguida
Estas aceitam o que esta ferramenta produz, então o resultado pode ir direto.
Inspetor de headers HTTP
HTTP Header Inspector
Busca uma URL e mostra os headers completos da resposta, a cadeia de redirecionamentos, os tempos e a compressão usada.
Verificador de links quebrados
Broken Link Checker
Extrai até 100 links de uma página, ou recebe uma lista colada, e verifica cada um em paralelo — status, destino do redirecionamento e tempo de resposta, HEAD primeiro e GET quando recusado.
Depurador de prévia de link
Link Preview Debugger
Lê as tags Open Graph e Twitter Card de uma URL e renderiza como o link vai aparecer ao ser compartilhado.
Cliente HTTP
HTTP Request Builder
Compõe e envia uma requisição GET/POST/PUT/PATCH/DELETE/HEAD com headers e corpo personalizados, e mostra status, headers, corpo e tempo — sem nunca repassar cookies ou Authorization.
Gerador de código de barras
Barcode Generator
Gera códigos de barras EAN-13, UPC, Code128, Code39 e ITF com dígitos verificadores e saída pronta para impressão.
Limpar CSV
CSV Cleaner
Apara células, normaliza cabeçalhos, corrige formatos de número e data e aponta as linhas com o número errado de colunas.