Controllo di robots.txt e sitemap
Digita il tuo sito. Leggiamo il robots.txt, troviamo la tua sitemap (dal robots.txt o dai percorsi consueti) e controlliamo cosa otterrebbe un motore di ricerca da entrambi.
Gratis, senza registrazione. Leggiamo solo pagine pubbliche e DNS e non conserviamo nulla.
Cosa controlla
- Googlebot e Bingbot non sono bloccati dall'intero sito
- Esiste una sitemap che elenca pagine
- Il robots.txt nomina la sitemap
- Gli URL della sitemap usano l'hostname su cui il sito risponde
- Date di modifica che significano qualcosa
Perché è importante
Un robots.txt che blocca l'intero sito, o una sitemap piena di indirizzi che reindirizzano, costa in silenzio traffico dalla ricerca e non compare in nessun altro report.
Nessuna sitemap non è un difetto: i motori di ricerca trovano le pagine anche seguendo i link. Viene segnalato, non bocciato.
Viene seguito un livello di indice di sitemap.
Questo è un solo controllo. L'audit gratuito li esegue tutti.
Header di sicurezza, DMARC e SPF, tag per la ricerca, dati strutturati, sitemap, accesso dei crawler AI, accessibilità e velocità reale, su fino a 20 pagine in un browser reale. Solo ($12/mese) aggiunge un prompt di correzione per ogni problema.