Come comparire su Claude. Quali robot di Anthropic far entrare, da dove Claude prende i risultati e i nove controlli da fare sul sito.
Il robot di Anthropic che molti siti bloccano, ClaudeBot, con la ricerca di Claude c’entra poco: contano altri due nomi. Qui c’è quali sono, da dove Claude prende i risultati e la checklist in nove punti, in Word e PDF.
Per comparire su Claude il sito deve lasciar entrare Claude-SearchBot, che indicizza le pagine per la ricerca, e Claude-User, che le apre quando un utente fa una domanda. ClaudeBot serve all’addestramento: bloccarlo non toglie dalla ricerca.
Claude non cerca solo con i suoi robot. Anthropic scrive che il noindex arriva ai suoi partner di ricerca, senza nominarli, e che le immagini vengono da Bing. Nell’elenco dei fornitori di Anthropic, letto il 10 novembre 2026, la ricerca web passa da tre fornitori, fra cui Brave Search, che non scansiona ciò che Googlebot non può scansionare.
Una pagina leggibile solo con JavaScript resta fuori dallo strumento con cui Claude apre i siti, secondo la documentazione dell’API.
La checklist in nove punti si scarica qui sotto, in Word e PDF, senza lasciare la mail.
Chi lo scrive: Mattia Esposito, consulente AI e marketing, fondatore di Itria AI. Pugliese, a Torino dal 2023, lavora da remoto in Italia e all’estero. Profilo LinkedIn.
La checklist in nove punti, da scaricare
Un foglio con la tabella dei quattro nomi con cui Anthropic visita i siti, i nove controlli con dove guardare e le righe di robots.txt, in Word da compilare e in PDF da stampare. Serve l’accesso al pannello del sito e a quello del CDN, se c’è. Si fa in mezz’ora; il punto 8 si ripete ogni due settimane.

| File | Cosa contiene | Link |
|---|---|---|
| Wordda compilare | La tabella dei robot di Anthropic, i nove controlli con dove guardare, le righe di robots.txt. | |
| PDFda stampare | La stessa checklist, da spuntare a penna. |
| N. | Cosa controllare | Dove si guarda |
|---|---|---|
| 1 | Il robots.txt lascia entrare Claude-SearchBot e Claude-User. | tuosito.it/robots.txt |
| 2 | Su ClaudeBot c’è una decisione presa: bloccarlo toglie dall’addestramento, non dalla ricerca. | tuosito.it/robots.txt |
| 3 | Googlebot non è bloccato, perché Brave segue le sue regole. | tuosito.it/robots.txt |
| 4 | Nessun noindex sulle pagine da far trovare. | Sorgente della pagina, meta robots |
| 5 | Il testo delle pagine chiave sta nell’HTML iniziale, leggibile senza JavaScript. | Sorgente della pagina (Ctrl+U) |
| 6 | Firewall e CDN non bloccano gli IP di Anthropic; su Claude-Agent c’è una decisione presa. | Pannello del CDN o dell’hosting |
| 7 | Brave conosce il sito: site:tuosito.it su Brave, e si contano le pagine. | search.brave.com |
| 8 | Prova su Claude con la ricerca attiva: tre-cinque domande fisse, sito fra le fonti sì o no, citato sì o no. | claude.ai, ogni due settimane |
| 9 | Se una pagina deve uscire dalle risposte, la richiesta ad Anthropic con la prova che il dominio è tuo. | Mail dal dominio |
Il 25 settembre 2026 ho fatto a Claude, con la ricerca web attiva, le stesse domande due volte, la mattina e la sera. La mattina, fra i risultati che Claude leggeva, itria.io aveva una pagina sola. Fra i due giri ho chiesto a Brave di rileggere sette indirizzi del sito. La sera le pagine diverse erano cinque.
Sulle otto domande uguali nei due giri, il sito è comparso fra i risultati in due risposte la mattina e in quattro la sera. Citato nella risposta, zero volte in entrambi. Una coppia di misure non prova una causa, e l’ho scritto così nel laboratorio su Brave e Claude. Lì ho scritto anche la conclusione: farsi trovare e farsi citare sono due passi diversi.
Claude pesca da più fonti, e ognuna ha le sue porte. Questa pagina mette in fila quelle che Anthropic e Brave documentano, lette il 10 novembre 2026. Per ChatGPT, Copilot e Google le porte sono altre, e stanno nella guida su come comparire su ChatGPT.
Come si compare nelle risposte di Claude
Claude cita le fonti quando usa la ricerca web: cerca, legge i risultati e mette in ogni risposta i link alle pagine da cui ha preso le informazioni. Anthropic l’ha lanciata il 20 marzo 2025 per i piani a pagamento negli Stati Uniti e l’ha aperta a tutti i piani, nel mondo, dal 27 maggio 2025. Nella nuova esperienza di Claude non c’è un interruttore: cerca quando serve.
Sui piani Team ed Enterprise la ricerca la attiva prima il proprietario dell’organizzazione, dalle impostazioni. Con la ricerca attiva Claude può anche aprire per intero una pagina di cui l’utente scrive l’indirizzo. E può usare la località approssimativa ricavata dall’IP, quindi la stessa domanda fatta da Bari e da Londra può tornare con risultati diversi.
Chi costruisce prodotti su Claude paga la ricerca 10 dollari ogni 1.000 ricerche, più i token. La documentazione stima da una a tre ricerche per una domanda su un fatto, dieci o più per un confronto. Ogni risultato porta con sé indirizzo, titolo e page_age, la data dell’ultimo aggiornamento della pagina: una data scritta e aggiornata viaggia insieme al link.
Che motore di ricerca usa Claude
Anthropic non nomina un solo motore: scrive che la ricerca di Claude si appoggia a partner con un indice proprio, e nomina Bing solo per le immagini. La frase sui partner sta nella pagina su come togliere contenuti da Claude, dove il noindex «tells our partners not to index your content so that they don’t send it to us in response to your web search query».
Per le immagini la pagina di aiuto sulla ricerca è esplicita: «Image search is powered by Bing». Per il testo, nessuna pagina di aiuto letta per questa guida nomina un motore, e la documentazione dell’API, che descrive lo strumento di ricerca riga per riga, non nomina un fornitore di indice. I nomi dei fornitori si trovano in un altro documento.
Nell’elenco dei fornitori di Anthropic, letto il 10 novembre 2026, la ricerca web passa da tre fornitori: Brave Search, TurboPuffer e Parallel Web Systems. Parallel non compariva nell’elenco letto il 25 settembre, quando ho misurato il caso raccontato sotto. Accanto c’è Claude-SearchBot, il robot con cui Anthropic indicizza le pagine per la ricerca. Fornitori e robot convivono, e nessuna fonte dice in che proporzione: per questo la checklist apre tutte le porte invece di sceglierne una.
| Cosa dice Anthropic | Dove lo scrive | Data |
|---|---|---|
| Claude-SearchBot indicizza le pagine per la ricerca | Pagina di aiuto sui robot | agg. 4 novembre 2026 |
| Il noindex arriva ai partner di ricerca | Pagina sulla rimozione dei contenuti | 3 settembre 2026 |
| Le immagini dei risultati vengono da Bing | Pagina di aiuto sulla ricerca web | agg. 9 novembre 2026 |
| Brave Search, TurboPuffer e Parallel Web Systems per la ricerca web | Elenco dei fornitori | letto il 10 novembre 2026 |
| Nessun fornitore di indice nominato | Documentazione dello strumento di ricerca dell’API | letta il 10 novembre 2026 |
| Ogni risposta con la ricerca porta citazioni e link | Annuncio e pagina di aiuto sulla ricerca web | 20 marzo 2025 |
| I risultati possono tenere conto della località dall’IP | Pagina di aiuto sulla ricerca web | agg. 9 novembre 2026 |
ClaudeBot, Claude-SearchBot e Claude-User: che differenza c’è
Anthropic ha tre robot con tre compiti, e per comparire contano Claude-SearchBot e Claude-User. Il primo indicizza le pagine per la ricerca; il secondo apre una pagina quando un utente fa una domanda; ClaudeBot raccoglie pagine per l’addestramento. Di Claude-User Anthropic scrive che disattivarlo «may reduce your site’s visibility for user-directed web search».
| Nome | Cosa fa, secondo Anthropic | Se lo blocchi |
|---|---|---|
| Claude-SearchBot | Indicizza le pagine per la ricerca di Claude. | Le pagine non vengono indicizzate per la ricerca |
| Claude-User | Recupera una pagina in risposta alla domanda di un utente. | Meno visibilità nella ricerca guidata dall’utente |
| ClaudeBot | Raccoglie pagine per l’addestramento dei modelli. | Esci dall’addestramento, resti nella ricerca |
| Claude-Agent | Il browser ospitato da Anthropic che fa compiti sul web per l’utente. | Si decide sul server o sul firewall |
Anthropic dichiara di rispettare il robots.txt e di non provare a superare i CAPTCHA. Pubblica gli indirizzi dei suoi robot in un file, bots.json: letto il 10 novembre 2026, conteneva 14 blocchi di indirizzi IPv4, creati il 20 ottobre 2026. Il file non dice a quale robot appartenga ogni blocco, quindi serve a riconoscere un finto Claude, non a distinguere i tre.
Per un robot che si comporta in modo diverso da come è descritto, Anthropic indica un indirizzo, [email protected], a cui scrivere dalla mail del dominio interessato. La pagina di aiuto esiste anche in italiano, con le stesse regole. La lista dei robot di tutti gli assistenti è nella voce di glossario sui crawler AI.
Bloccare ClaudeBot mi toglie dalla ricerca di Claude?
No: ClaudeBot serve all’addestramento, e le impostazioni dei tre robot sono separate. Un sito può dire di no all’addestramento e restare nella ricerca con poche righe nel robots.txt, come queste. L’ordine non conta: ogni robot legge il blocco col suo nome.
User-agent: Claude-SearchBot
Allow: /
User-agent: Claude-User
Allow: /
User-agent: ClaudeBot
Disallow: /
Un robots.txt che non nomina questi robot li lascia già entrare. Le righe servono quando più sopra c’è un blocco generale, del tipo «User-agent: *» con «Disallow: /», che può arrivare da un plugin o da una configurazione vecchia di anni. La checklist lo cerca al punto 1; tutte le righe per gli altri assistenti sono nella guida su robots.txt e crawler AI.
Nell’Unione europea il no all’addestramento ha anche un peso giuridico. La direttiva sul diritto d’autore del 2019, all’articolo 4, paragrafo 3, permette ai titolari di riservarsi l’estrazione di testo e dati con strumenti leggibili da una macchina, e l’AI Act, all’articolo 53, chiede ai fornitori di modelli di rispettare quella riserva. Sulla ricerca, invece, le regole sono le stesse in Italia e nel mondo inglese.
Cos’è Claude-Agent e come si riconosce
Claude-Agent è il nome del browser vero che Anthropic ospita per far fare a Claude compiti sul web per conto dell’utente, per esempio in Claude Duet. Le sue richieste portano lo user agent di un normale Chrome con in più Claude-Agent/1.0. Anthropic consiglia di riconoscerlo dal nome: «match on the Claude-Agent token rather than the full string».
Gli indirizzi IP di questo traffico sono pubblicati in un file a parte, claude.com/.well-known/sail, in un formato che segue una bozza tecnica che Anthropic stessa definisce non ancora uno standard. Lo user agent si può falsificare: per esserne sicuri si controlla l’IP. Le preferenze su Claude-Agent sono indipendenti da quelle sui tre robot.
La pagina di Anthropic parla di consentire o negare questo traffico e non dice che legga il robots.txt: la decisione si prende sul server o nel firewall. Per un’azienda che vende, un browser che compila un modulo o confronta un prezzo per conto di un compratore è traffico da far passare. Per un’area riservata ai clienti, la scelta può essere diversa.
Brave e Claude: perché bloccare Googlebot chiude anche Brave
Il robot di Brave non ha un nome suo e segue le regole scritte per Googlebot: una pagina chiusa a Googlebot resta chiusa anche a Brave. Brave lo scrive così: «if a domain or page is not crawlable by Googlebot, then Brave Search’s bot will not crawl it either». Lo fa per non essere escluso dai siti che lasciano entrare solo Google.
Per chi vuole comparire su Claude la conseguenza è pratica. Un Disallow pensato per Googlebot, anche solo su una sezione del sito, vale per Brave, e quindi per la parte della ricerca di Claude che passa dal suo indice. Per togliere una pagina dall’indice di Brave il robots.txt non basta: serve il noindex, e Brave deve ripassare sulla pagina per leggerlo.
Brave ha una pagina pubblica per chiedere di rileggere un indirizzo, uno alla volta. Il controllo più rapido si fa sulla sua ricerca: site: seguito dal dominio, e si contano le pagine che escono. Se sono una o due su un sito di decine, Brave conosce poco il sito. Il suo crawler, scrive Brave, è alimentato anche dal Web Discovery Project, un’opzione del browser disattivata di default.
Da una pagina a cinque. La mattina del 25 settembre 2026, per la ricerca web di Claude, itria.io aveva una pagina sola fra i risultati; la sera, dopo aver chiesto a Brave di rileggerne sette, cinque. Citazioni nella risposta: zero e zero. Prima e dopo, con i limiti del dato, in Brave e Claude.
La mail che non c’era. L’offuscamento di Cloudflare toglieva l’indirizzo dall’HTML e lo rimetteva con uno script: per un assistente la pagina contatti era senza contatti. Il caso, e lo stesso difetto su 14 siti di produttori su 121, è nel pezzo sulla mail che gli assistenti AI non vedono.
Il risultato. Fra l’11 ottobre e il 7 novembre 2026 le pagine di itria.io sono comparse 3.818 volte nelle risposte AI di Google e Microsoft: 3.550 impression in AI Overview e AI Mode secondo Search Console, 268 citazioni in Copilot secondo Bing Webmaster Tools.
Claude legge i siti fatti in JavaScript?
Lo strumento con cui Claude apre le pagine, secondo la documentazione dell’API, non li legge. Anthropic lo scrive in una riga: «The web fetch tool currently does not support websites dynamically rendered with JavaScript.» Testi, prezzi e contatti che compaiono solo dopo uno script restano fuori da quello che Claude riporta.
La pagina descrive l’API, cioè Claude dentro i prodotti di altri; che l’app claude.ai si comporti allo stesso modo è plausibile, ma non è scritto. Un browser vero come quello di Claude-Agent, invece, esegue la pagina. Lo strumento legge testo, HTML e PDF, e apre solo indirizzi già comparsi nella conversazione, nel messaggio dell’utente o nei risultati di una ricerca. Un indirizzo vietato dal robots.txt torna con un errore.
L’ho scritto il 7 settembre, dopo aver guardato i siti di 142 aziende italiane che vendono anche all’estero: «Un assistente non sfoglia un sito: lo legge, e riferisce quello che ci trova scritto.» Lo stesso giorno ho contato chi aveva il file che spiega l’azienda agli assistenti: 28 su 143, e in 24 l’aveva scritto un plugin. Il post completo.
Come si toglie una pagina dalle risposte di Claude
Con il noindex per le pagine, con il robots.txt per immagini e video e, per un indirizzo già comparso, con una richiesta scritta ad Anthropic. La pagina di aiuto del 3 settembre 2026 indica [email protected] e chiede una prova che il dominio è tuo: la registrazione ICANN o WHOIS, la ricevuta del dominio, il certificato SSL o una mail dal dominio stesso.
Per immagini e video Anthropic scrive che i partner di ricerca indicizzano solo i file che i loro robot possono scansionare, e che si escludono con il robots.txt. Il modo più sicuro per non comparire, aggiunge, resta togliere il contenuto o metterlo dietro una password. Le stesse leve, lette al contrario, sono quelle da controllare quando una pagina non compare.
C’è poi un’uscita che il sito non controlla. Chi costruisce un prodotto su Claude può limitare la ricerca a una lista di domini ammessi o escluderne altri, con le impostazioni allowed_domains e blocked_domains. Un sito può quindi restare fuori da quel prodotto per una scelta di chi lo costruisce, qualunque cosa dica il suo robots.txt.
Come vedo se Claude mi cita
Facendo a Claude, con la ricerca attiva, le stesse tre-cinque domande a distanza di settimane, e segnando se il sito compare fra le fonti e se viene citato. Nei documenti di Anthropic letti per questa guida non c’è un pannello per i proprietari dei siti come Search Console o il rapporto AI Performance di Bing. Le risposte cambiano da un giro all’altro: conta la serie.
Nei log del server si vedono le visite di Claude-SearchBot e di Claude-User, e quanto spesso tornano sulle stesse pagine. Fra comparire fra le fonti ed essere citati c’è il contenuto: pagine che rispondono a una domanda precisa, con numeri, date e fonti. Come si lavora su quel passo lo racconta la guida su come farsi citare dagli assistenti AI.
Per gli altri assistenti le porte sono diverse: Perplexity ha un indice suo, Copilot passa da Bing. Come lo si costruisce su un’azienda vera lo racconta la pagina sulla presenza su motori e assistenti AI; le domande da fare a chi lo vende sono nella pagina sulla consulenza GEO.
Domande e risposte
Come faccio a comparire su Claude?
Lasciando entrare Claude-SearchBot, il robot con cui Anthropic indicizza le pagine per la ricerca, e Claude-User, che apre una pagina quando un utente fa una domanda. Poi tenendo libero Googlebot, perché Brave segue le sue regole, e mettendo il testo nell’HTML, leggibile senza JavaScript.
Per essere citati, poi, la pagina deve rispondere a una domanda precisa con fatti che si possono verificare.
Che motore di ricerca usa Claude?
Anthropic scrive che la ricerca di Claude si appoggia a partner con un indice proprio, senza nominarli, e che le immagini vengono da Bing. Nell’elenco dei fornitori di Anthropic, letto il 10 novembre 2026, la ricerca web passa da tre fornitori: Brave Search, TurboPuffer e Parallel Web Systems. Anthropic ha anche un robot suo, Claude-SearchBot, che indicizza le pagine per la ricerca.
Se blocco ClaudeBot sparisco da Claude?
No. ClaudeBot raccoglie pagine per addestrare i modelli; per la ricerca contano Claude-SearchBot e Claude-User. Le impostazioni sono separate: si può dire di no all’addestramento e restare nelle risposte.
Cos’è Claude-SearchBot?
È il robot di Anthropic che indicizza le pagine per la ricerca di Claude. Se lo blocchi nel robots.txt, scrive Anthropic, le pagine non vengono indicizzate per la ricerca. Gli indirizzi IP dei robot di Anthropic sono pubblicati in claude.com/crawling/bots.json.
Claude legge i siti fatti in JavaScript?
Lo strumento con cui Claude apre le pagine non li legge, secondo la documentazione dell’API di Anthropic: testi e contatti che compaiono solo dopo uno script restano fuori. Per l’app claude.ai la documentazione non lo dice, quindi conviene comunque mettere il testo nell’HTML.
Note sulle fonti
- Anthropic, Claude Help Center, pagina sui robot di Anthropic, aggiornata il 4 novembre 2026: ClaudeBot, Claude-User, Claude-SearchBot, robots.txt, CAPTCHA, l’indirizzo per le segnalazioni; da qui la frase su Claude-User. Indirizzi IP in bots.json. Letti il 10 novembre 2026.
- Anthropic, browser ospitati da Anthropic, aggiornata il 4 novembre 2026: Claude-Agent, la frase sul token e il file degli IP.
- Anthropic, Enable and use web search, aggiornata il 9 novembre 2026: piani, località, immagini da Bing; annuncio della ricerca web, 20 marzo 2025, aggiornato al 27 maggio 2025.
- Anthropic, Report, block, and remove content from Claude, 3 settembre 2026: i partner di ricerca, il noindex, la richiesta di rimozione; da qui la frase sui partner.
- Anthropic, documentazione dell’API: strumento di ricerca (prezzo, page_age, domini ammessi ed esclusi) e strumento di lettura delle pagine (JavaScript, formati, robots.txt).
- Anthropic, elenco dei fornitori, letto il 10 novembre 2026: Brave Search, TurboPuffer e Parallel Web Systems con la funzione di ricerca web.
- Brave, Brave Search Crawler: le regole di Googlebot, il noindex, il Web Discovery Project; da qui la frase citata. Letta il 10 novembre 2026.
- Direttiva (UE) 2019/790, articolo 4, paragrafo 3, e regolamento (UE) 2024/1689, articolo 53, paragrafo 1, lettera c, su EUR-Lex.
- Il caso Brave e Claude è una sola coppia di misure, il 25 settembre 2026; i numeri di itria.io vengono da Search Console (rapporto sull’AI generativa) e da Bing Webmaster Tools, finestra dall’11 ottobre al 7 novembre 2026.
Aprire le porte a Claude è il primo passo. Farsi citare al posto dei concorrenti è il lavoro dopo. Il posizionamento si costruisce partendo dal mercato.
Mattia Esposito, che ha scritto questa guida, con Itria lavora anche sul posizionamento: analisi di mercato approfondite per capire dove i concorrenti sono scoperti e prendersi quello spazio. Lo ha fatto prima sul suo sito. Ad agosto, chiesto chi avesse fondato itria.io, ChatGPT non lo trovava. Dall’11 ottobre al 7 novembre 2026 le pagine di itria.io sono comparse 13.803 volte nei risultati di Google e Bing e 3.818 volte nelle risposte dell’intelligenza artificiale: AI Overview e AI Mode di Google, Copilot di Microsoft.