Il tuo sito blocca l'IA senza saperlo? robots.txt e i crawler di ChatGPT, Google, Claude, Perplexity e Apple (2026)

Aggiornata: 11 novembre 2026

Un assistente IA può citare il tuo sito solo se il suo crawler riesce a leggerlo. Molti siti di hotel bloccano i crawler senza che il proprietario lo sappia: per un modello, un plugin di sicurezza o un'impostazione del fornitore. Questa guida spiega quale crawler usa ogni azienda, a cosa serve e come verificarlo in cinque minuti, secondo la documentazione ufficiale (fonti in fondo).

I crawler che ti fanno apparire (non bloccarli)

Ogni azienda separa il crawler di ricerca da quello di addestramento. Per apparire nelle risposte, questi devono poter entrare:

ChatGPT: OAI-SearchBot. OpenAI dice che è quello che mostra i siti nella ricerca di ChatGPT.
Google (AI Overviews e Modalità IA): Googlebot. Google dice che non ci sono requisiti aggiuntivi per le sue funzioni IA: basta che la pagina sia scansionabile e indicizzabile.
Claude: Claude-SearchBot, che secondo Anthropic migliora la qualità dei risultati di ricerca.
Perplexity: PerplexityBot, che secondo Perplexity mostra e collega i siti nei risultati e non serve ad addestrare modelli.
Siri, Spotlight e Safari: Applebot.
Bing (e ciò che si appoggia a Bing): Bingbot.

I crawler di addestramento (decidi tu)

Bloccarli non ti toglie dai risultati, secondo le stesse aziende:

GPTBot (OpenAI): bloccarlo indica che i tuoi contenuti non devono servire ad addestrare modelli.
Google-Extended: Google dice che non incide sull'inclusione nella Ricerca Google né è un fattore di posizionamento.
Novità (30-10-2026): Google ha annunciato che nel 2027, insieme ad altri fornitori di IA, supporterà un segnale comune in robots.txt per dire «non usare il mio sito per l'addestramento» (lavoro del gruppo AIPREF dell'IETF). Non funziona ancora: per ora usa il nome di ogni robot.
ClaudeBot (Anthropic) e Applebot-Extended (Apple): Apple dice che le pagine che lo bloccano possono comunque comparire nei risultati di ricerca.
Ci sono anche crawler che entrano solo su richiesta di un utente (ChatGPT-User, Claude-User, Perplexity-User): se li blocchi, il viaggiatore che chiede all'assistente di aprire il tuo sito non potrà farlo.

Come verificarlo in cinque minuti

Apri iltuosito.it/robots.txt nel browser. Se vedi «User-agent: *» seguito da «Disallow: /», stai bloccando tutti.
Cerca i nomi qui sopra. Una riga «Disallow: /» sotto OAI-SearchBot, Claude-SearchBot, PerplexityBot, Googlebot, Bingbot o Applebot ti toglie da quell'assistente.
Se il tuo sito usa Cloudflare: a luglio 2025 Cloudflare ha annunciato che avrebbe chiesto a ogni nuovo dominio se consentire i crawler IA. La sua documentazione attuale dice che nei domini nuovi sono consentiti per impostazione predefinita, ma se il sito è stato configurato prima, controlla nel pannello le impostazioni di accesso di crawler e agenti IA.
Chiedi a chi gestisce il sito o il motore di prenotazione se un plugin di sicurezza o un antibot blocca per conto suo. robots.txt non serve se il crawler non arriva alla pagina.

Un esempio semplice

Se vuoi essere trovato e il resto non ti interessa, basta non bloccare nessuno. Se blocchi l'addestramento, lascia esplicitamente aperti i crawler di ricerca: OAI-SearchBot, Claude-SearchBot, PerplexityBot, Googlebot, Bingbot, Applebot.

Come aiuta iQuota

La pagina ufficiale che iQuota pubblica per ogni struttura lascia entrare i crawler di ricerca delle IA, è in testo e ha dati strutturati. Inoltre il connettore di iQuota fornisce agli assistenti compatibili disponibilità e prezzi reali con prenotazione diretta, senza commissioni e con pagamento in struttura. Non garantisce che un'IA ti consigli.

Vuoi una pagina di prenotazione leggibile dall'IA e un connettore con i tuoi prezzi reali, senza commissioni? I primi 30 hotel entrano gratis fino al 30 giugno 2027.

Scopri il programma Founding Hotels (in inglese)

Domande frequenti

Se blocco GPTBot sparisco da ChatGPT?

No, secondo OpenAI. Per la ricerca di ChatGPT conta OAI-SearchBot; GPTBot serve ad addestrare modelli.

Bloccare Google-Extended mi toglie da Google?

No. Google dice che non incide sull'inclusione nella Ricerca né sul posizionamento. Per AI Overviews e Modalità IA conta Googlebot.

Serve un file speciale per apparire nell'IA?

No. Google dice che non ci sono requisiti aggiuntivi per le sue funzioni IA. Conta non bloccare i crawler di ricerca.

Fonti

Altre guide per hotel

Altre guide per hotel →

Español · English · Português · Ελληνικά