Chiamata · 30 min
MarketingMattia EspositoAggiornato al 10 novembre 202613 minuti di lettura

I crawler AI leggono JavaScript? Bot per bot, cosa è misurato e cosa no, e come controllare le pagine del tuo sito in mezz’ora.

Un sito che a te sembra completo può arrivare a ChatGPT senza testo, senza prezzi e senza contatti, se li aggiunge uno script. Qui c’è chi esegue JavaScript, chi no, da quale fonte lo sappiamo e la checklist in otto punti, in Word e PDF.

In breve

Nell’unico studio pubblico, i crawler di OpenAI, Anthropic, Perplexity e Meta leggevano l’HTML senza eseguire JavaScript. Googlebot e Bingbot, che servono AI Overview e Copilot, lo eseguono.

Lo studio è di Vercel e MERJ, del 17 dicembre 2024. Nessun proprietario dei crawler AI ha scritto nella sua documentazione se il suo bot esegue JavaScript, e Google stessa avverte che non tutti i bot lo fanno.

La regola che regge comunque: testo, prezzi, contatti, titolo e canonical nell’HTML iniziale. Li leggono tutti, chiunque legga.

La checklist in otto punti si scarica qui sotto, in Word e PDF, senza lasciare la mail.

Chi lo scrive: Mattia Esposito, consulente AI e marketing, fondatore di Itria AI. Pugliese, a Torino dal 2023, lavora da remoto in Italia e all’estero. Profilo LinkedIn.

La checklist «Leggibile senza JavaScript», da scaricare

Un foglio con la tabella dei bot che eseguono JavaScript e di quelli che non lo eseguono, otto controlli con dove guardare e un registro per le cinque pagine che contano, in Word da compilare e in PDF da stampare. Basta il browser: il sorgente della pagina si apre con Ctrl+U. Si fa in mezz’ora; il punto 8 richiede l’accesso ai log.

La checklist Leggibile senza JavaScript, con la tabella dei crawler AI che eseguono JavaScript e il registro per pagina
FileCosa contieneLink
Wordda compilare

La tabella dei bot, gli otto controlli, il registro per pagina.

javascript-e-crawler-ai-checklist.docx

PDFda stampare

La stessa checklist, da spuntare a penna.

javascript-e-crawler-ai-checklist.pdf

N.Cosa controllareDove si guarda
1

Titolo, H1 e testo principale sono nell’HTML grezzo.

Ctrl+U o curl

2

Prezzi, indirizzo, telefono e mail sono scritti nell’HTML, non aggiunti da uno script.

Ctrl+U, cerca la mail

3

Il title e la meta description sono nell’HTML iniziale.

Ctrl+U

4

Il canonical è nell’HTML iniziale, non iniettato con JavaScript.

Ctrl+U, cerca canonical

5

I link del menu sono link veri, con un indirizzo, e non pulsanti che partono da uno script.

Ctrl+U

6

La pagina risponde 200, senza redirect a catena.

Strumenti per sviluppatori, Rete

7

Le versioni quasi uguali di una pagina hanno un canonical o un hreflang.

Ctrl+U

8

Nei log, quali bot hanno chiesto la pagina e se hanno chiesto anche i file .js.

Log del server o del CDN

Il 25 settembre 2026 ho letto la pagina contatti di itria.io come la legge un assistente AI, cioè l’HTML che il server consegna, senza eseguire gli script. La mail non c’era. Era scritta in chiaro, ma l’offuscamento di Cloudflare la toglieva dall’HTML e la rimetteva con uno script nel browser: per una persona c’era, per un crawler no.

L’ho corretta la sera stessa, escludendo l’indirizzo dall’offuscamento, e ho raccontato il caso nel laboratorio sulla mail che gli assistenti AI non vedono. Il giorno dopo, sui siti di 121 produttori alimentari, ho trovato lo stesso difetto in 14: sette offuscavano la mail, sette non la scrivevano proprio nel codice. Lo studio ha i numeri pagina per pagina.

Il 7 settembre l’avevo scritto così, guardando i siti di 142 aziende che vendono anche all’estero: «Un assistente non sfoglia un sito: lo legge, e riferisce quello che ci trova scritto.» Il post completo. Se quello che c’è scritto lo aggiunge uno script, l’assistente riferisce una pagina vuota.

I crawler AI leggono JavaScript? La risposta breve

Nell’unico studio pubblico con dati di traffico, nessuno dei principali crawler AI eseguiva JavaScript, tranne Gemini e AppleBot. Lo hanno misurato Vercel e MERJ sui log della rete Vercel, e lo hanno scritto il 17 dicembre 2024: «none of the major AI crawlers currently render JavaScript». I crawler di OpenAI, Anthropic, Perplexity, Meta e ByteDance leggevano l’HTML così com’era.

Google e Microsoft sono un’altra storia. Googlebot, da cui passano AI Overview e AI Mode, esegue JavaScript con una versione aggiornata di Chromium. Bingbot, che serve l’indice di Copilot, usa dal 2019 il motore di Microsoft Edge. Per loro una pagina costruita da uno script è leggibile, con un ritardo; per gli altri no.

Il punto debole della risposta è la data. Sono passati quasi due anni, e nessun proprietario dei crawler AI ha scritto nella sua documentazione se il suo bot esegue JavaScript. Le pagine di OpenAI e di Perplexity sui loro crawler, lette il 10 novembre 2026, non contengono la parola. Google, che lo fa, avverte nella sua guida che «not all bots can run JavaScript».

La stessa pagina letta da due tipi di robot: i crawler AI che leggono solo l’HTML iniziale, e Googlebot e Bingbot che dopo una coda di rendering eseguono lo script Il servermanda l’HTML iniziale Crawler AIGPTBot, ClaudeBot, Perplexity Legge solo l’HTMLlo script non parte Googlebot, Bingbote AppleBot Coda di renderingsecondi o di più Pagina resalo script è eseguito
La stessa pagina arriva in due modi. Quello che sta nell’HTML iniziale lo leggono tutti; quello che aggiunge uno script lo vede solo chi lo esegue. Fonti: Vercel e MERJ, 17 dicembre 2024; Google Search Central, aggiornata il 4 marzo 2026.

Lo studio di Vercel e MERJ: cosa ha misurato e quando

Lo studio ha letto per alcuni mesi i log di nextjs.org e della rete di Vercel, più due siti di annunci di lavoro costruiti con tecnologie diverse, per vedere quali robot eseguivano gli script. Gli autori sono Giacomo Zecchini, Alice Alexandra Moore, Malte Ubl e Ryan Siddle. Vercel è un’azienda di hosting che vende il rendering lato server: è uno studio di fornitore, con dati di traffico veri.

Il dato più utile è sottile. ChatGPT e Claude scaricavano i file JavaScript, l’11,50% e il 23,84% delle loro richieste, ma non li eseguivano. Il contenuto già presente nell’HTML iniziale, anche in forma di dati JSON dentro la pagina, poteva comunque essere letto. Copilot è rimasto fuori dallo studio, perché non ha uno user agent suo.

Cosa ha misurato lo studioIl numeroPeriodo
Richieste di Googlebot

4,5 miliardi

un mese, fine 2024

Richieste di GPTBot

569 milioni

un mese, fine 2024

Richieste di Claude

370 milioni

un mese, fine 2024

Richieste di AppleBot

314 milioni

un mese, fine 2024

Richieste di PerplexityBot

24,4 milioni

un mese, fine 2024

File JavaScript scaricati da ChatGPT, senza eseguirli

11,50% delle richieste

alcuni mesi

File JavaScript scaricati da Claude, senza eseguirli

23,84% delle richieste

alcuni mesi

Richieste di ChatGPT su pagine 404

34,82%, più 14,36% su redirect

alcuni mesi

Richieste di Claude su pagine 404

34,16%

alcuni mesi

Richieste di Googlebot su pagine 404

8,22%, più 1,49% su redirect

alcuni mesi

Le ultime righe dicono una seconda cosa: i crawler AI di allora sprecavano circa un terzo delle richieste su pagine che non esistevano. Un sito con molti link rotti o redirect a catena spreca le loro visite su indirizzi inutili. La raccomandazione dello studio è una sola: contenuto principale, titoli, descrizioni e navigazione resi lato server, e lo script solo per gli elementi accessori.

Bot per bot: chi esegue JavaScript e chi no

ChatGPT non eseguiva JavaScript nello studio; Gemini, Copilot e AI Overview passano da robot che lo eseguono. La tabella mette ogni bot accanto alla sua fonte e alla data. Dove la fonte è il proprietario la riga è più solida; dove è Vercel vale per la fine del 2024. I nomi esatti di tutti i robot, e cosa bloccare, sono nella guida su robots.txt e crawler AI.

Chi leggeEsegue JavaScript?Fonte, data
Googlebot (AI Overview, AI Mode)

Sì, Chromium aggiornato, con una coda di rendering

Google, agg. 4 marzo 2026

Gemini

Sì, tramite l’infrastruttura di Googlebot

Vercel e MERJ, 17 dicembre 2024

Bingbot (Copilot)

Sì, motore di Microsoft Edge

Bing, ottobre 2019

GPTBot, OAI-SearchBot, ChatGPT-User

No: scaricano file JS senza eseguirli

Vercel e MERJ, 17 dicembre 2024

ClaudeBot

No: scarica file JS senza eseguirli

Vercel e MERJ, 17 dicembre 2024

PerplexityBot

No

Vercel e MERJ, 17 dicembre 2024

Meta-ExternalAgent, Bytespider, CCBot

No

Vercel e MERJ, 17 dicembre 2024

AppleBot

Sì, crawler basato su browser

Vercel e MERJ, 17 dicembre 2024

Strumento web fetch di Claude (API)

No, lo scrive Anthropic

Anthropic, letta il 10 novembre 2026

Due righe vanno lette con attenzione. Google-Extended, che molti scambiano per il crawler di Gemini, è un token per il robots.txt: decide se le pagine servono all’addestramento di Gemini, ma la lettura la fa Googlebot. E per Anthropic l’unica frase scritta riguarda lo strumento dell’API: «The web fetch tool currently does not support websites dynamically rendered with JavaScript.» Per ClaudeBot e Claude-SearchBot non scrive nulla.

Crawler e agenti con browser: due cose diverse

Un crawler scarica le pagine per un indice o per l’addestramento; un agente con browser apre il sito come una persona, per fare un compito, ed esegue gli script. Claude-Agent, il browser che Anthropic ospita per far fare a Claude compiti sul web, è di questo secondo tipo: le sue richieste portano lo user agent di un normale Chrome con in più il suo nome.

La differenza conta perché le due cose arrivano in momenti diversi. Perché un assistente citi una pagina, di solito la pagina deve essere passata prima da un crawler o da uno strumento di lettura, e lì lo script non parte. L’agente con browser arriva dopo, quando qualcuno gli chiede di prenotare o di confrontare un prezzo. Come si prepara un sito per questi agenti è nella guida sui siti pronti per gli agenti AI.

Cosa è cambiato nel 2026, e cosa non è confermato

Nessun annuncio ufficiale: al 10 novembre 2026 nessun proprietario dei crawler AI ha scritto che il suo bot esegue JavaScript. Circolano due voci in direzioni opposte. Un test pubblicato a settembre 2026 dice di aver visto solo letture dell’HTML grezzo; alcuni sviluppatori, da fine settembre, scrivono di aver visto nei propri log OAI-SearchBot e GPTBot eseguire gli script.

Nessuna delle due si può verificare da fuori, e OpenAI non ha detto niente. In pagina le trovi per quello che sono, segnalazioni non confermate. Per chi ha un sito la conclusione non cambia: se il testo sta nell’HTML iniziale, lo leggono sia i robot che eseguono gli script sia quelli che non li eseguono. È l’unica scelta che non dipende da chi ha ragione.

C’è poi un ritardo che vale anche per Google. La sua guida descrive tre fasi, scansione, rendering e indicizzazione: le pagine con codice 200 vanno in coda per il rendering, che può durare qualche secondo o di più. Un testo che compare solo dopo lo script entra nell’indice più tardi di uno già scritto nella pagina.

Come controllare il tuo sito in cinque minuti

Apri la pagina, premi Ctrl+U e cerca nel sorgente il testo principale, il prezzo e la mail: quello che non trovi lì, un crawler che non esegue JavaScript non lo vede. Lo stesso controllo, più rigoroso, si fa da terminale con curl seguito dall’indirizzo della pagina. È il controllo che racconto nel laboratorio sulla mail.

Da terminale: l’HTML come lo riceve un crawler, e una parola da cercarci dentro

curl -sL https://www.tuosito.it/contatti | grep -i "info@"

Se il comando non stampa niente, la mail non è nell’HTML. La stessa prova si ripete su home, servizi, prezzi e una pagina prodotto, che sono le cinque righe del registro nella checklist. Spesso il problema non riguarda tutto il sito: basta un catalogo, un configuratore o un listino caricato da uno script per perdere proprio quella pagina.

L’ultimo controllo è nei log, se l’hosting li mostra. Si cerca per nome del bot: GPTBot, ClaudeBot, PerplexityBot. Si vede quali pagine chiedono e se chiedono anche i file .js. Un bot che chiede la pagina e non i file la legge sicuramente com’è; uno che chiede i file non è detto che li esegua, come mostrava lo studio.

Pagine quasi duplicate: perché l’AI cita la versione sbagliata

I sistemi AI raggruppano le pagine quasi uguali e ne scelgono una a rappresentarle, e può essere quella vecchia. Lo ha scritto Bing il 19 dicembre 2025: «LLMs group near-duplicate URLs into a single cluster and then choose one page to represent the set.» Bing parla di raggruppamento, non di penalità.

I rimedi di Bing sono il canonical, metadati coerenti e IndexNow per dire subito cosa è cambiato. Google mette i segnali in ordine di forza: il redirect e il canonical sono forti, la presenza nella sitemap è debole. E sconsiglia il noindex per scegliere la pagina principale dentro lo stesso sito. Il caso di Copilot è nella guida su come comparire su Copilot.

Il legame con JavaScript sta nel canonical. Google scrive che si può iniettare con uno script ma non lo consiglia. Se il canonical arriva solo dopo lo script, Googlebot lo vede dopo il rendering; un crawler che legge solo l’HTML, deducendo dallo studio, non lo vede affatto. Per questo la checklist lo chiede nell’HTML iniziale, al punto 4.

Due casi misurati su itria.io

La mail che non c’era. Il 25 settembre 2026 l’HTML servito della pagina contatti di itria.io non conteneva nessun indirizzo, perché l’offuscamento di Cloudflare lo rimetteva solo con uno script. Corretto la sera stessa; il caso è nel laboratorio sulla mail che gli assistenti AI non vedono.

Quattordici siti su 121. Nello studio sui siti dei produttori alimentari del 26 settembre 2026, 7 siti offuscano la mail e altri 7 non la scrivono nel codice delle pagine lette: per un assistente, 14 aziende senza un indirizzo da dare.

Il risultato. Fra l’11 ottobre e il 7 novembre 2026 le pagine di itria.io sono comparse 3.818 volte nelle risposte AI di Google e Microsoft: 3.550 impression in AI Overview e AI Mode secondo Search Console, 268 citazioni in Copilot secondo Bing Webmaster Tools.

Cosa fa una PMI con un sito in JavaScript

Mette nell’HTML iniziale tutto ciò che un cliente deve trovare, con il rendering lato server, il pre-rendering o la generazione statica, e lascia allo script solo ciò che serve a chi usa il sito. È il consiglio di Google e quello dello studio di Vercel. Google chiama il rendering dinamico, cioè una versione per i bot e una per le persone, «a workaround and not a recommended solution».

Prima di rifare il sito conviene sapere quanto è grande il problema: le cinque righe del registro bastano a dirlo. Se testo, prezzi e contatti ci sono già, il lavoro è altrove: un file llms.txt che presenti l’azienda agli assistenti, le porte del robots.txt, le pagine che rispondono alle domande dei clienti. Il quadro delle tecniche è nella guida alla generative engine optimization.

Per ChatGPT, Claude, Brave e gli altri, le porte di ogni assistente sono nelle guide su come comparire su ChatGPT e su Claude; tutte le guide sono nell’indice del marketing per le PMI. Come si fa questo lavoro su un’azienda vera lo racconta la pagina sulla presenza su motori e assistenti AI.

Domande e risposte

I crawler AI leggono JavaScript?

In gran parte no, secondo l’unico studio pubblico, di Vercel e MERJ, del 17 dicembre 2024: i crawler di OpenAI, Anthropic, Perplexity e Meta leggevano l’HTML senza eseguire gli script. Googlebot, che serve anche AI Overview e AI Mode, e Bingbot, che serve Copilot, eseguono JavaScript.

Nessun proprietario dei crawler AI ha scritto nella sua documentazione se il suo bot lo esegue.

ChatGPT legge i siti fatti in JavaScript?

Nello studio di Vercel e MERJ, GPTBot, OAI-SearchBot e ChatGPT-User scaricavano una parte dei file JavaScript senza eseguirli, quindi leggevano solo l’HTML iniziale. La pagina di OpenAI sui suoi crawler, letta il 10 novembre 2026, non parla di JavaScript. Da fine settembre 2026 circolano segnalazioni di un cambio, non confermate da OpenAI.

Google e Gemini leggono il JavaScript?

Sì. Google scrive che la Ricerca esegue JavaScript con una versione aggiornata di Chromium, dopo una coda di rendering che può durare secondi o di più. Gemini, secondo Vercel e MERJ, passa dall’infrastruttura di Googlebot. Google-Extended è un token per il robots.txt, non un crawler.

Come vedo se il mio sito è leggibile senza JavaScript?

Apri la pagina, premi Ctrl+U per vedere il sorgente e cerca il testo principale, il prezzo e la mail. Se lì non ci sono, un crawler che non esegue JavaScript non li vede. Lo stesso controllo si fa con curl seguito dall’indirizzo della pagina.

Il rendering dinamico risolve il problema?

Google lo chiama un ripiego e non una soluzione consigliata. Il suo consiglio è il rendering lato server, il pre-rendering o la generazione statica, che mettono il contenuto nell’HTML per tutti, persone e bot.

Note sulle fonti

  1. Vercel, The rise of the AI crawler, di G. Zecchini, A. A. Moore, M. Ubl e R. Siddle (MERJ), 17 dicembre 2024: metodo, bot, volumi, file scaricati, 404 e redirect; da qui la frase sui crawler. Studio di un fornitore di hosting. Letto il 10 novembre 2026.
  2. Google Search Central, Understand JavaScript SEO basics, aggiornata il 4 marzo 2026: Chromium, le tre fasi, i bot che non eseguono JavaScript, il canonical iniettato. Dynamic rendering as a workaround, aggiornata il 10 dicembre 2025.
  3. Google Search Central, canonical e URL duplicati, aggiornata il 10 luglio 2026: forza dei segnali, noindex.
  4. Bing Webmaster Blog, l’evergreen Bingbot, ottobre 2019; contenuti duplicati e ricerca AI, 19 dicembre 2025: da qui la frase sui duplicati.
  5. OpenAI, Overview of OpenAI Crawlers, e Perplexity, Perplexity Crawlers: nessuna menzione di JavaScript, lette il 10 novembre 2026.
  6. Anthropic, strumento web fetch (la frase sul JavaScript) e browser ospitati da Anthropic, aggiornata il 4 novembre 2026: Claude-Agent.
  7. Le segnalazioni del 2026 su un cambio di OpenAI vengono da post di singoli sviluppatori e da un test indipendente, non verificabili da fuori; nessun annuncio di OpenAI al 10 novembre 2026.
  8. I casi di itria.io: laboratorio del 25 settembre 2026 e studio del 26 settembre 2026 su 121 siti; i numeri vengono da Search Console (rapporto sull’AI generativa) e da Bing Webmaster Tools, finestra dall’11 ottobre al 7 novembre 2026.
·Chi lo fa per te

Mettere il testo nell’HTML è il primo passo. Farsi citare al posto dei concorrenti è il lavoro dopo. Il posizionamento si costruisce partendo dal mercato.

Mattia Esposito, che ha scritto questa guida, con Itria lavora anche sul posizionamento: analisi di mercato approfondite per capire dove i concorrenti sono scoperti e prendersi quello spazio. Lo ha fatto prima sul suo sito. Ad agosto, chiesto chi avesse fondato itria.io, ChatGPT non lo trovava. Dall’11 ottobre al 7 novembre 2026 le pagine di itria.io sono comparse 13.803 volte nei risultati di Google e Bing e 3.818 volte nelle risposte dell’intelligenza artificiale: AI Overview e AI Mode di Google, Copilot di Microsoft.