Verificatore di accesso per i crawler AI

Controlla cosa dice il tuo robots.txt ai crawler di ricerca AI e ai controlli sull'uso dei dati. È una verifica delle regole, non una prova di indicizzazione.

Cosa ottieni

Quali token per crawler e uso dei dati il tuo robots.txt consente o blocca
La regola esatta responsabile di ogni blocco
Se un Disallow generale li sta bloccando per sbaglio
A chi appartiene ogni crawler e cosa alimenta

Come funziona

Aggiungi il tuo sito
Incolla il dominio o la pagina da controllare. Niente da installare, nessun codice di tracciamento.
Leggiamo il tuo robots.txt
Scarichiamo il file e lo analizziamo come fa un crawler — gruppo per gruppo, perché una regola per GPTBot non dice nulla sul gruppo per *.
Leggi il risultato
Il risultato, perché conta e cosa cambiare — sulla pagina, subito. Nessun account, niente da installare.

Domande frequenti

Questo strumento è gratuito?

Sì, e su questo non c'è alcun limite — ci costa solo qualche richiesta HTTP. Un account Citex serve a conservare il risultato, rieseguirlo con una pianificazione e vedere cosa è cambiato.

Quanto è accurato il risultato?

È esatto, non un campione. Questo strumento legge i tuoi file e riporta cosa dicono, senza alcun modello di mezzo — eseguilo due volte a un minuto di distanza e ottieni la stessa risposta, a meno che tu non abbia cambiato qualcosa.