Visualizzatore robots.txt

Un visualizzatore di robots.txt online. Inserisci un dominio per recuperare e analizzare il robots.txt del sito, mostrando le regole Allow/Disallow raggruppate per User-agent, oltre agli URL Sitemap e al ritardo di scansione. Utile per verificare le regole dei crawler e per la SEO.