Test Robots.txt
Incolla il tuo robots.txt e verifica se un percorso URL è consentito per un crawler.
Come funziona
- 1
Incolla il robots.txt
Il contenuto completo del file.
- 2
Inserisci percorso e user agent
Per esempio /privato/pagina e Googlebot.
- 3
Leggi il verdetto
Consentito o bloccato, con la regola applicata.
Strumenti correlati
Gli strumenti che si usano subito dopo questo.
Fatto per non intralciare
487
Strumenti disponibili
6
Lingue
0
Filigrane aggiunte
2h
Prima che i file siano cancellati
100%
Gratis per iniziare
∞
Dispositivi supportati
Domande frequenti
Quella con il percorso più lungo; a parità, vince Allow.
Testa le regole prima di pubblicare
Un solo Disallow sbagliato può nascondere l’intero sito ai motori di ricerca. Provare alcuni URL importanti contro le tue regole scova gli errori prima del crawler.
Il test segue le regole standard: vince la corrispondenza più specifica (più lunga), Allow batte Disallow a parità, e * e $ sono supportati.