Verifica visibilità IA
Veda a colpo d'occhio se i crawler IA possono leggere il suo sito, direttamente dal robots.txt.
Questo strumento legge il file robots.txt del suo sito e mostra lo stato di autorizzazione di quattro crawler IA: GPTBot di OpenAI, ClaudeBot di Anthropic, PerplexityBot di Perplexity e Google-Extended, che controlla se i prodotti IA di Google (AI Overviews, Gemini) possono usare i suoi contenuti. Se un crawler è bloccato, quel servizio non vede i suoi contenuti e non può citarla nelle risposte.
Verifica anche altri tre punti: se ha un file llms.txt (una convenzione emergente per riassumere il sito ai sistemi IA, non ancora uno standard ufficiale), se la sua sitemap.xml è raggiungibile, e se le sue pagine contengono dati strutturati (schema.org). I dati strutturati aiutano sia i motori di ricerca sia i sistemi IA a capire con precisione cosa sia il suo contenuto: un articolo, un prodotto, delle domande frequenti.
Questo controllo legge solo le impostazioni di autorizzazione, non misura quanto spesso i crawler visitino realmente il suo sito né quanto spesso compaia nelle risposte IA. Consentire un crawler nel robots.txt non garantisce visibilità, rimuove solo il blocco, il contenuto stesso deve restare comunque aperto, accurato e facile da citare.
Come si usa
- Inserisca l'indirizzo del suo sito.
- Avvii la verifica, il robots.txt viene letto automaticamente.
- Veda quale dei quattro crawler risulta eventualmente bloccato.
- Controlli lo stato di llms.txt, sitemap e dati strutturati.
- Rimuova il blocco per ogni crawler segnalato come non consentito nel robots.txt.
Domande frequenti
Bloccare GPTBot riduce il mio traffico?
Bloccare GPTBot impedisce a ChatGPT di usare i suoi contenuti per l'addestramento o le risposte in tempo reale; non incide sul traffico di ricerca esistente, gestito da un crawler diverso, Googlebot.
Il file llms.txt è obbligatorio?
No, non è ancora uno standard ufficiale; alcuni siti lo aggiungono per offrire un riassunto ai sistemi IA, ma nessun motore o sistema IA garantisce di leggerlo.
Bloccare Google-Extended mi fa sparire dalla ricerca Google?
No, Google-Extended controlla solo l'uso dei contenuti per Gemini e AI Overviews; la sua visibilità nella ricerca Google classica non ne risente, poiché dipende da Googlebot.
Posso comparire nelle risposte IA senza dati strutturati?
Sì, ma i dati strutturati rendono più chiari il tipo e le relazioni dei suoi contenuti, aumentando le probabilità di una citazione corretta.
