Controllo dei crawler AI: ChatGPT, Perplexity e Claude possono leggere il tuo sito?
Digita il tuo sito. Leggiamo il suo robots.txt come fa ogni crawler AI e ti diciamo quali vengono respinti, poi cerchiamo nella home page il markup Organization che dice chi sei.
Gratis, senza registrazione. Leggiamo solo pagine pubbliche e DNS e non conserviamo nulla.
Cosa controlla
- Crawler di ricerca: OAI-SearchBot, ChatGPT-User, PerplexityBot, Perplexity-User, Claude-SearchBot, Claude-User
- Crawler di addestramento: GPTBot, ClaudeBot, Google-Extended, CCBot, Applebot-Extended
- Schema Organization (o Person) con link ai profili sameAs nella home page
Le regole dei crawler di un sito smettono, una alla volta, di bloccare i crawler che ChatGPT, Claude e Perplexity usano per consultarlo.
Perché è importante
Un assistente che cerca sul web può citare solo un sito che il suo crawler può leggere. Bloccare un crawler di ricerca ti tiene fuori dalle sue risposte; bloccare un crawler di addestramento è una scelta e viene mostrata come tale.
Legge solo il robots.txt. Una CDN o un firewall (ad esempio Cloudflare "Block AI bots") può comunque respingere i crawler; l'audit completo e il suo prompt di correzione coprono quel passaggio.
Lo schema viene letto dall'HTML che il tuo server invia; il markup aggiunto da JavaScript dopo il caricamento qui non si vede.
Questo è un solo controllo. L'audit gratuito li esegue tutti.
Header di sicurezza, DMARC e SPF, tag per la ricerca, dati strutturati, sitemap, accesso dei crawler AI, accessibilità e velocità reale, su fino a 20 pagine in un browser reale. Solo ($12/mese) aggiunge un prompt di correzione per ogni problema.