{"id":12556,"date":"2026-09-27T20:44:34","date_gmt":"2026-09-27T20:44:34","guid":{"rendered":"https:\/\/www.visilay.com\/blog\/crawler-ai\/"},"modified":"2026-09-27T20:44:34","modified_gmt":"2026-09-27T20:44:34","slug":"crawler-ai","status":"publish","type":"post","link":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/","title":{"rendered":"Crawler AI: quali bot visitano un sito aziendale e quali bloccare (dati dai nostri log)"},"content":{"rendered":"\n<p class=\"wp-block-paragraph\">Un crawler AI \u00e8 un bot che visita i siti per conto di un'azienda di intelligenza artificiale. Pu\u00f2 farlo per tre motivi diversi: raccogliere testi per addestrare un modello, indicizzare pagine per un motore di ricerca AI, oppure aprire una pagina in tempo reale perch\u00e9 un utente l'ha chiesto in chat. Decidere quali far entrare dipende da quale dei tre si vuole permettere.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Abbiamo contato i bot che hanno visitato visilay.com tra il 31 agosto e il 27 settembre 2026, su circa 199.000 righe di log. I bot di OpenAI (GPTBot, OAI-SearchBot e ChatGPT-User insieme) hanno fatto 4.773 richieste. Googlebot 1.355.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\">Le richieste in un mese sul nostro sito<\/h2>\n\n\n\n<figure class=\"wp-block-table\"><table><thead><tr><th>User agent<\/th><th>Azienda<\/th><th>Richieste (31 ago - 27 set 2026)<\/th><\/tr><\/thead><tbody><tr><td>Claude-User<\/td><td>Anthropic<\/td><td>9.340<\/td><\/tr><tr><td>GPTBot<\/td><td>OpenAI<\/td><td>2.689<\/td><\/tr><tr><td>bingbot<\/td><td>Microsoft<\/td><td>2.281<\/td><\/tr><tr><td>Applebot<\/td><td>Apple<\/td><td>1.567<\/td><\/tr><tr><td>ClaudeBot<\/td><td>Anthropic<\/td><td>1.540<\/td><\/tr><tr><td>Googlebot<\/td><td>Google<\/td><td>1.355<\/td><\/tr><tr><td>Meta-ExternalAgent<\/td><td>Meta<\/td><td>1.353<\/td><\/tr><tr><td>OAI-SearchBot<\/td><td>OpenAI<\/td><td>1.250<\/td><\/tr><tr><td>ChatGPT-User<\/td><td>OpenAI<\/td><td>834<\/td><\/tr><tr><td>GoogleOther<\/td><td>Google<\/td><td>617<\/td><\/tr><tr><td>Amazonbot<\/td><td>Amazon<\/td><td>107<\/td><\/tr><tr><td>PerplexityBot<\/td><td>Perplexity<\/td><td>100<\/td><\/tr><tr><td>Perplexity-User<\/td><td>Perplexity<\/td><td>58<\/td><\/tr><tr><td>Bytespider<\/td><td>ByteDance<\/td><td>57<\/td><\/tr><tr><td>CCBot<\/td><td>Common Crawl<\/td><td>32<\/td><\/tr><tr><td>Claude-SearchBot<\/td><td>Anthropic<\/td><td>30<\/td><\/tr><tr><td>MistralAI-User<\/td><td>Mistral<\/td><td>29<\/td><\/tr><tr><td>DuckAssistBot<\/td><td>DuckDuckGo<\/td><td>24<\/td><\/tr><\/tbody><\/table><\/figure>\n\n\n\n<p class=\"wp-block-paragraph\">Tre avvertenze per leggere la tabella:<\/p>\n\n\n\n<ul class=\"wp-block-list\"><li><strong>Claude-User \u00e8 gonfiato da noi.<\/strong> Usiamo Claude ogni giorno per lavorare sul sito, quindi buona parte di quelle richieste sono nostre. Non va letto come interesse esterno.<\/li><li><strong>ChatGPT-User ha visitato 70 URL diversi<\/strong>, ma 402 richieste su 834 sono sulla home page. \u00c8 il comportamento tipico di un assistente che verifica chi siamo prima di rispondere a una domanda.<\/li><li><strong>Richieste non vuol dire visite umane.<\/strong> Nello stesso periodo le visite con referrer chatgpt.com, cio\u00e8 persone che hanno cliccato un link in una risposta, sono state 18.<\/li><\/ul>\n\n\n\n<p class=\"wp-block-paragraph\">Il dato di fondo \u00e8 coerente con quello che misura Cloudflare. Nel <a href=\"https:\/\/blog.cloudflare.com\/agentic-internet-bot-report\/\" target=\"_blank\" rel=\"noopener\">rapporto di luglio 2026<\/a> i crawler per l'addestramento sono il 52% del traffico di bot AI, contro il 22% della primavera 2025. Un anno prima Cloudflare aveva calcolato che <a href=\"https:\/\/blog.cloudflare.com\/ai-search-crawl-refer-ratio-on-radar\/\" target=\"_blank\" rel=\"noopener\">Anthropic faceva circa 70.900 richieste per ogni visita rimandata al sito<\/a>. Il rapporto tra quanto i bot prendono e quanto restituiscono in traffico \u00e8 molto sbilanciato.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\">I tre tipi di crawler AI<\/h2>\n\n\n\n<h3 class=\"wp-block-heading\">Crawler di addestramento<\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">Scaricano pagine per addestrare i modelli. Bloccarli non toglie il sito dalle risposte di oggi, ma riduce quanto i modelli futuri sapranno di te.<\/p>\n\n\n\n<ul class=\"wp-block-list\"><li><strong>GPTBot<\/strong> (OpenAI): bloccarlo equivale all'opt-out dall'addestramento (<a href=\"https:\/\/developers.openai.com\/api\/docs\/bots\" target=\"_blank\" rel=\"noopener\">documentazione<\/a>).<\/li><li><strong>ClaudeBot<\/strong> (Anthropic).<\/li><li><strong>Google-Extended<\/strong>: non \u00e8 un crawler separato ma un token del robots.txt. Controlla l'uso dei contenuti per addestrare e ancorare Gemini, e secondo Google <a href=\"https:\/\/developers.google.com\/search\/docs\/crawling-indexing\/google-common-crawlers\" target=\"_blank\" rel=\"noopener\">\"does not impact a site's inclusion in Google Search\"<\/a>.<\/li><li><strong>CCBot<\/strong> (Common Crawl), <strong>Meta-ExternalAgent<\/strong>, <strong>Bytespider<\/strong>, <strong>Amazonbot<\/strong>.<\/li><\/ul>\n\n\n\n<h3 class=\"wp-block-heading\">Crawler di ricerca AI<\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">Indicizzano le pagine per mostrarle nelle risposte con ricerca web. Bloccarli toglie il sito da quelle risposte.<\/p>\n\n\n\n<ul class=\"wp-block-list\"><li><strong>OAI-SearchBot<\/strong> (OpenAI): se lo blocchi, il sito non compare nei riassunti di ChatGPT search. OpenAI pu\u00f2 mostrare al massimo link e titolo se la pagina arriva da un fornitore di ricerca terzo.<\/li><li><strong>PerplexityBot<\/strong>: indicizza per la ricerca, non per l'addestramento, e rispetta robots.txt (<a href=\"https:\/\/docs.perplexity.ai\/guides\/bots\" target=\"_blank\" rel=\"noopener\">documentazione<\/a>).<\/li><li><strong>Claude-SearchBot<\/strong> (Anthropic).<\/li><li><strong>bingbot<\/strong>: non \u00e8 un crawler AI, ma alimenta Copilot e, secondo test indipendenti, parte dei risultati di ChatGPT.<\/li><\/ul>\n\n\n\n<h3 class=\"wp-block-heading\">Agenti avviati dall'utente<\/h3>\n\n\n\n<p class=\"wp-block-paragraph\">Aprono una pagina perch\u00e9 una persona l'ha chiesto in quel momento, per esempio incollando un link in chat o chiedendo di confrontare fornitori.<\/p>\n\n\n\n<ul class=\"wp-block-list\"><li><strong>ChatGPT-User<\/strong>: per OpenAI \"robots.txt rules may not apply\".<\/li><li><strong>Perplexity-User<\/strong>: \"generally ignores robots.txt\".<\/li><li><strong>Claude-User<\/strong>, <strong>MistralAI-User<\/strong>, <strong>DuckAssistBot<\/strong>.<\/li><li><strong>Google-Agent<\/strong>: aggiunto alla documentazione Google il <a href=\"https:\/\/developers.google.com\/crawling\/docs\/changelog\" target=\"_blank\" rel=\"noopener\">20 marzo 2026<\/a> per gli agenti Google che navigano e agiscono su richiesta dell'utente.<\/li><\/ul>\n\n\n\n<h2 class=\"wp-block-heading\">Cosa succede se li blocchi<\/h2>\n\n\n\n<figure class=\"wp-block-table\"><table><thead><tr><th>Se blocchi<\/th><th>Effetto<\/th><\/tr><\/thead><tbody><tr><td>GPTBot, ClaudeBot, CCBot<\/td><td>I modelli futuri vengono addestrati senza i tuoi testi. Nessun effetto immediato sulle risposte con ricerca<\/td><\/tr><tr><td>Google-Extended<\/td><td>Nessun effetto sulla ricerca Google. Limita l'uso dei contenuti per Gemini<\/td><\/tr><tr><td>OAI-SearchBot<\/td><td>Il sito esce dalle risposte di ChatGPT search<\/td><\/tr><tr><td>PerplexityBot<\/td><td>Il sito esce dalle risposte di Perplexity<\/td><\/tr><tr><td>ChatGPT-User, Perplexity-User<\/td><td>Spesso nessuno via robots.txt, perch\u00e9 non sempre lo rispettano. Via firewall blocchi anche clienti reali che usano un assistente<\/td><\/tr><tr><td>Googlebot<\/td><td>Il sito esce da Google, AI Overview e AI Mode comprese<\/td><\/tr><\/tbody><\/table><\/figure>\n\n\n\n<p class=\"wp-block-paragraph\">L'ultima riga va detta chiaramente: non esiste un modo per restare nella ricerca Google e uscire dalle AI Overview bloccando un bot. Da giugno 2026 Search Console ha un'impostazione per escludere il sito dalle funzioni AI, a livello di dominio. Ne parliamo in <a href=\"https:\/\/www.visilay.com\/it\/blog\/ai-overviews-influenza-seo\/\">impatto delle AI Overviews sulla SEO<\/a>.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\">Cosa consigliamo a un sito aziendale<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Per un'azienda B2B o un e-commerce che vuole farsi trovare, la scelta di default \u00e8:<\/p>\n\n\n\n<ul class=\"wp-block-list\"><li><strong>far entrare<\/strong> i crawler di ricerca AI (OAI-SearchBot, PerplexityBot, Claude-SearchBot) e bingbot;<\/li><li><strong>far entrare<\/strong> gli agenti avviati dall'utente, perch\u00e9 sono potenziali clienti che stanno facendo una domanda su di te;<\/li><li><strong>decidere caso per caso<\/strong> sui crawler di addestramento. Per un'azienda che vuole essere conosciuta dai modelli ha senso lasciarli entrare. Per un editore che vive di contenuti originali, meno.<\/li><\/ul>\n\n\n\n<p class=\"wp-block-paragraph\">Un robots.txt di esempio che blocca solo l'addestramento di OpenAI e lascia tutto il resto:<\/p>\n\n\n\n<pre class=\"wp-block-code\"><code>User-agent: GPTBot\nDisallow: \/\n\nUser-agent: OAI-SearchBot\nAllow: \/\n\nUser-agent: *\nAllow: \/<\/code><\/pre>\n\n\n\n<p class=\"wp-block-paragraph\">La sintassi completa \u00e8 nella guida al <a href=\"https:\/\/www.visilay.com\/it\/blog\/robots-txt\/\">robots.txt<\/a>.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\">Firewall e protezioni anti-bot<\/h2>\n\n\n\n<p class=\"wp-block-paragraph\">Molti siti bloccano i crawler AI senza saperlo, perch\u00e9 il firewall o il CDN li tratta come traffico sospetto. \u00c8 il caso pi\u00f9 frequente che troviamo negli audit: robots.txt aperto, ma richieste respinte con errore 403.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\">Per distinguere gli agenti veri da quelli che si spacciano per loro esistono due strumenti:<\/p>\n\n\n\n<ul class=\"wp-block-list\"><li><strong>liste di IP pubblicate.<\/strong> OpenAI e Perplexity pubblicano gli indirizzi dei loro bot in formato JSON;<\/li><li><strong>firme delle richieste (Web Bot Auth).<\/strong> Cloudflare ha introdotto i <a href=\"https:\/\/blog.cloudflare.com\/signed-agents\/\" target=\"_blank\" rel=\"noopener\">\"signed agents\" ad agosto 2025<\/a>. L'agente di ChatGPT firma le richieste con l'intestazione <code>Signature-Agent: \"https:\/\/chatgpt.com\"<\/code>.<\/li><\/ul>\n\n\n\n<p class=\"wp-block-paragraph\">Se usi Cloudflare, controlla le regole sui bot AI. Da luglio 2025 Cloudflare blocca per impostazione predefinita i crawler AI sui nuovi domini, e chi ha attivato il sito dopo quella data pu\u00f2 averli fuori senza saperlo.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\">Come leggere i propri log<\/h2>\n\n\n\n<ol class=\"wp-block-list\"><li><strong>Scarica i log di accesso<\/strong> dal pannello dell'hosting. Su cPanel sono in \"Accessi grezzi\".<\/li><li><strong>Cerca gli user agent<\/strong> della tabella qui sopra. Anche un semplice <code>grep -c \"GPTBot\" access.log<\/code> d\u00e0 un primo numero.<\/li><li><strong>Controlla i codici di risposta.<\/strong> Se un bot che vuoi far entrare riceve molti 403 o 429, lo sta bloccando qualcosa.<\/li><li><strong>Guarda quali pagine visitano.<\/strong> Se OAI-SearchBot visita solo la home, le pagine interne sono difficili da raggiungere.<\/li><li><strong>Confronta con il traffico umano da AI<\/strong> nel canale AI Assistant di GA4, come spiegato in <a href=\"https:\/\/www.visilay.com\/it\/blog\/visibilita-ai\/\">visibilit\u00e0 AI<\/a>.<\/li><\/ol>\n\n\n\n<p class=\"wp-block-paragraph\">Lo user agent si pu\u00f2 falsificare. Per un'analisi seria conviene verificare gli IP contro le liste ufficiali.<\/p>\n\n\n\n<p class=\"wp-block-paragraph\"><em>Approfondimento consigliato: <a href=\"https:\/\/www.visilay.com\/it\/blog\/seo-agenti-ai\/\">SEO per agenti AI: come rendere il sito usabile da browser e agenti<\/a>.<\/em><\/p>\n\n\n\n<h2 class=\"wp-block-heading\">Domande frequenti<\/h2>\n\n\n\n<div class=\"schema-faq wp-block-yoast-faq-block\"><div class=\"schema-faq-section\" id=\"faq-question-1759701\"><strong class=\"schema-faq-question\">Cos'\u00e8 un crawler AI?<\/strong> <p class=\"schema-faq-answer\">\u00c8 un bot che visita i siti per conto di un'azienda di intelligenza artificiale. Pu\u00f2 raccogliere testi per l'addestramento, come GPTBot, indicizzare pagine per le risposte con ricerca, come OAI-SearchBot, o aprire pagine in tempo reale su richiesta di un utente, come ChatGPT-User.<\/p><\/div><div class=\"schema-faq-section\" id=\"faq-question-1759702\"><strong class=\"schema-faq-question\">Bloccare GPTBot mi toglie da ChatGPT?<\/strong> <p class=\"schema-faq-answer\">No. GPTBot serve all'addestramento. Per le risposte con ricerca web ChatGPT usa OAI-SearchBot: bloccando quello il sito esce dai riassunti di ChatGPT search.<\/p><\/div><div class=\"schema-faq-section\" id=\"faq-question-1759703\"><strong class=\"schema-faq-question\">Posso bloccare le AI Overview senza uscire da Google?<\/strong> <p class=\"schema-faq-answer\">Non con il robots.txt, perch\u00e9 AI Overview e AI Mode usano Googlebot. Search Console offre da giugno 2026 un'impostazione per escludere il sito dalle funzioni AI, valida per tutto il dominio.<\/p><\/div><div class=\"schema-faq-section\" id=\"faq-question-1759704\"><strong class=\"schema-faq-question\">Perch\u00e9 i crawler AI fanno cos\u00ec tante richieste?<\/strong> <p class=\"schema-faq-answer\">Perch\u00e9 scaricano molte pagine e mandano pochi visitatori. Cloudflare ha calcolato nel 2025 che Anthropic faceva circa 70.900 richieste per ogni visita rimandata a un sito. Sul nostro sito, in quattro settimane, i bot di OpenAI hanno fatto 4.773 richieste e ChatGPT ha mandato 18 visite.<\/p><\/div><\/div>\n","protected":false},"excerpt":{"rendered":"<p>In quattro settimane i bot di OpenAI hanno fatto pi\u00f9 richieste di Googlebot sul nostro sito. Quali sono i crawler AI, a cosa servono, cosa succede bloccandoli e come leggere i propri log.<\/p>\n","protected":false},"author":12,"featured_media":0,"comment_status":"closed","ping_status":"","sticky":false,"template":"","format":"standard","meta":{"_joinchat":[],"footnotes":""},"categories":[2],"tags":[],"class_list":["post-12556","post","type-post","status-publish","format-standard","hentry","category-seo"],"yoast_head":"<!-- This site is optimized with the Yoast SEO plugin v28.5 - https:\/\/yoast.com\/product\/yoast-seo-wordpress\/ -->\n<title>Crawler AI: quali bot visitano il sito e quali bloccare | Visilay<\/title>\n<meta name=\"description\" content=\"GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot e gli altri: cosa fanno, cosa succede se li blocchi e quante richieste hanno fatto in un mese sul nostro sito.\" \/>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/\" \/>\n<meta property=\"og:locale\" content=\"it_IT\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Crawler AI: quali bot visitano il sito e quali bloccare | Visilay\" \/>\n<meta property=\"og:description\" content=\"GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot e gli altri: cosa fanno, cosa succede se li blocchi e quante richieste hanno fatto in un mese sul nostro sito.\" \/>\n<meta property=\"og:url\" content=\"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/\" \/>\n<meta property=\"og:site_name\" content=\"Visilay\" \/>\n<meta property=\"article:published_time\" content=\"2026-09-27T20:44:34+00:00\" \/>\n<meta property=\"og:image\" content=\"https:\/\/www.visilay.com\/wp-content\/uploads\/2024\/09\/logo-payoff-site-image.png\" \/>\n\t<meta property=\"og:image:width\" content=\"1270\" \/>\n\t<meta property=\"og:image:height\" content=\"675\" \/>\n\t<meta property=\"og:image:type\" content=\"image\/png\" \/>\n<meta name=\"author\" content=\"Matteo Pellegrini\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:label1\" content=\"Scritto da\" \/>\n\t<meta name=\"twitter:data1\" content=\"Matteo Pellegrini\" \/>\n\t<meta name=\"twitter:label2\" content=\"Tempo di lettura stimato\" \/>\n\t<meta name=\"twitter:data2\" content=\"6 minuti\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\\\/\\\/schema.org\",\"@graph\":[{\"@type\":\"Article\",\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#article\",\"isPartOf\":{\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/\"},\"author\":{\"name\":\"Matteo Pellegrini\",\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/#\\\/schema\\\/person\\\/cd1f8d753b965cacbae0a53347a87b90\"},\"headline\":\"Crawler AI: quali bot visitano un sito aziendale e quali bloccare (dati dai nostri log)\",\"datePublished\":\"2026-09-27T20:44:34+00:00\",\"mainEntityOfPage\":{\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/\"},\"wordCount\":1218,\"publisher\":{\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/#organization\"},\"articleSection\":[\"SEO\"],\"inLanguage\":\"it-IT\"},{\"@type\":[\"WebPage\",\"FAQPage\"],\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/\",\"url\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/\",\"name\":\"Crawler AI: quali bot visitano il sito e quali bloccare | Visilay\",\"isPartOf\":{\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/#website\"},\"datePublished\":\"2026-09-27T20:44:34+00:00\",\"description\":\"GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot e gli altri: cosa fanno, cosa succede se li blocchi e quante richieste hanno fatto in un mese sul nostro sito.\",\"breadcrumb\":{\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#breadcrumb\"},\"mainEntity\":[{\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759701\"},{\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759702\"},{\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759703\"},{\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759704\"}],\"inLanguage\":\"it-IT\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/\"]}]},{\"@type\":\"BreadcrumbList\",\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#breadcrumb\",\"itemListElement\":[{\"@type\":\"ListItem\",\"position\":1,\"name\":\"Home\",\"item\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/\"},{\"@type\":\"ListItem\",\"position\":2,\"name\":\"SEO\",\"item\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/seo\\\/\"},{\"@type\":\"ListItem\",\"position\":3,\"name\":\"Crawler AI: quali bot visitano un sito aziendale e quali bloccare (dati dai nostri log)\"}]},{\"@type\":\"WebSite\",\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/#website\",\"url\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/\",\"name\":\"Visilay\",\"description\":\"Visilay\",\"publisher\":{\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/#organization\"},\"alternateName\":\"Visilay marketing services for B2B\",\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/?s={search_term_string}\"},\"query-input\":{\"@type\":\"PropertyValueSpecification\",\"valueRequired\":true,\"valueName\":\"search_term_string\"}}],\"inLanguage\":\"it-IT\"},{\"@type\":\"Organization\",\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/#organization\",\"name\":\"Visilay\",\"alternateName\":\"Visilay marketing services for b2b\",\"url\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/\",\"logo\":{\"@type\":\"ImageObject\",\"inLanguage\":\"it-IT\",\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/#\\\/schema\\\/logo\\\/image\\\/\",\"url\":\"https:\\\/\\\/www.visilay.com\\\/wp-content\\\/uploads\\\/2024\\\/09\\\/logo-visilay-mark-purple.png\",\"contentUrl\":\"https:\\\/\\\/www.visilay.com\\\/wp-content\\\/uploads\\\/2024\\\/09\\\/logo-visilay-mark-purple.png\",\"width\":512,\"height\":512,\"caption\":\"Visilay\"},\"image\":{\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/#\\\/schema\\\/logo\\\/image\\\/\"}},{\"@type\":\"Person\",\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/#\\\/schema\\\/person\\\/cd1f8d753b965cacbae0a53347a87b90\",\"name\":\"Matteo Pellegrini\",\"image\":{\"@type\":\"ImageObject\",\"inLanguage\":\"it-IT\",\"@id\":\"https:\\\/\\\/secure.gravatar.com\\\/avatar\\\/31533f37c71f18c7ee75fe617374494f6ba9c75120331ce756c7ad433d5f5668?s=96&d=mm&r=g\",\"url\":\"https:\\\/\\\/secure.gravatar.com\\\/avatar\\\/31533f37c71f18c7ee75fe617374494f6ba9c75120331ce756c7ad433d5f5668?s=96&d=mm&r=g\",\"contentUrl\":\"https:\\\/\\\/secure.gravatar.com\\\/avatar\\\/31533f37c71f18c7ee75fe617374494f6ba9c75120331ce756c7ad433d5f5668?s=96&d=mm&r=g\",\"caption\":\"Matteo Pellegrini\"},\"description\":\"I\u2019m a Business Developer, and at Visilay I focus on developing data-driven SEO, Google Ads, and CRO strategies. I love historical museums, have been practicing Karate for as long as I can remember, and on weekends I enjoy exploring Italian villages in search of authentic local food.\"},{\"@type\":\"Question\",\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759701\",\"position\":1,\"url\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759701\",\"name\":\"Cos'\u00e8 un crawler AI?\",\"answerCount\":1,\"acceptedAnswer\":{\"@type\":\"Answer\",\"text\":\"\u00c8 un bot che visita i siti per conto di un'azienda di intelligenza artificiale. Pu\u00f2 raccogliere testi per l'addestramento, come GPTBot, indicizzare pagine per le risposte con ricerca, come OAI-SearchBot, o aprire pagine in tempo reale su richiesta di un utente, come ChatGPT-User.\",\"inLanguage\":\"it-IT\"},\"inLanguage\":\"it-IT\"},{\"@type\":\"Question\",\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759702\",\"position\":2,\"url\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759702\",\"name\":\"Bloccare GPTBot mi toglie da ChatGPT?\",\"answerCount\":1,\"acceptedAnswer\":{\"@type\":\"Answer\",\"text\":\"No. GPTBot serve all'addestramento. Per le risposte con ricerca web ChatGPT usa OAI-SearchBot: bloccando quello il sito esce dai riassunti di ChatGPT search.\",\"inLanguage\":\"it-IT\"},\"inLanguage\":\"it-IT\"},{\"@type\":\"Question\",\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759703\",\"position\":3,\"url\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759703\",\"name\":\"Posso bloccare le AI Overview senza uscire da Google?\",\"answerCount\":1,\"acceptedAnswer\":{\"@type\":\"Answer\",\"text\":\"Non con il robots.txt, perch\u00e9 AI Overview e AI Mode usano Googlebot. Search Console offre da giugno 2026 un'impostazione per escludere il sito dalle funzioni AI, valida per tutto il dominio.\",\"inLanguage\":\"it-IT\"},\"inLanguage\":\"it-IT\"},{\"@type\":\"Question\",\"@id\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759704\",\"position\":4,\"url\":\"https:\\\/\\\/www.visilay.com\\\/it\\\/blog\\\/crawler-ai\\\/#faq-question-1759704\",\"name\":\"Perch\u00e9 i crawler AI fanno cos\u00ec tante richieste?\",\"answerCount\":1,\"acceptedAnswer\":{\"@type\":\"Answer\",\"text\":\"Perch\u00e9 scaricano molte pagine e mandano pochi visitatori. Cloudflare ha calcolato nel 2025 che Anthropic faceva circa 70.900 richieste per ogni visita rimandata a un sito. Sul nostro sito, in quattro settimane, i bot di OpenAI hanno fatto 4.773 richieste e ChatGPT ha mandato 18 visite.\",\"inLanguage\":\"it-IT\"},\"inLanguage\":\"it-IT\"}]}<\/script>\n<!-- \/ Yoast SEO plugin. -->","yoast_head_json":{"title":"Crawler AI: quali bot visitano il sito e quali bloccare | Visilay","description":"GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot e gli altri: cosa fanno, cosa succede se li blocchi e quante richieste hanno fatto in un mese sul nostro sito.","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/","og_locale":"it_IT","og_type":"article","og_title":"Crawler AI: quali bot visitano il sito e quali bloccare | Visilay","og_description":"GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot e gli altri: cosa fanno, cosa succede se li blocchi e quante richieste hanno fatto in un mese sul nostro sito.","og_url":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/","og_site_name":"Visilay","article_published_time":"2026-09-27T20:44:34+00:00","og_image":[{"width":1270,"height":675,"url":"https:\/\/www.visilay.com\/wp-content\/uploads\/2024\/09\/logo-payoff-site-image.png","type":"image\/png"}],"author":"Matteo Pellegrini","twitter_card":"summary_large_image","twitter_misc":{"Scritto da":"Matteo Pellegrini","Tempo di lettura stimato":"6 minuti"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"Article","@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#article","isPartOf":{"@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/"},"author":{"name":"Matteo Pellegrini","@id":"https:\/\/www.visilay.com\/it\/#\/schema\/person\/cd1f8d753b965cacbae0a53347a87b90"},"headline":"Crawler AI: quali bot visitano un sito aziendale e quali bloccare (dati dai nostri log)","datePublished":"2026-09-27T20:44:34+00:00","mainEntityOfPage":{"@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/"},"wordCount":1218,"publisher":{"@id":"https:\/\/www.visilay.com\/it\/#organization"},"articleSection":["SEO"],"inLanguage":"it-IT"},{"@type":["WebPage","FAQPage"],"@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/","url":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/","name":"Crawler AI: quali bot visitano il sito e quali bloccare | Visilay","isPartOf":{"@id":"https:\/\/www.visilay.com\/it\/#website"},"datePublished":"2026-09-27T20:44:34+00:00","description":"GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot e gli altri: cosa fanno, cosa succede se li blocchi e quante richieste hanno fatto in un mese sul nostro sito.","breadcrumb":{"@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#breadcrumb"},"mainEntity":[{"@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759701"},{"@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759702"},{"@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759703"},{"@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759704"}],"inLanguage":"it-IT","potentialAction":[{"@type":"ReadAction","target":["https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/"]}]},{"@type":"BreadcrumbList","@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"Home","item":"https:\/\/www.visilay.com\/it\/"},{"@type":"ListItem","position":2,"name":"SEO","item":"https:\/\/www.visilay.com\/it\/blog\/seo\/"},{"@type":"ListItem","position":3,"name":"Crawler AI: quali bot visitano un sito aziendale e quali bloccare (dati dai nostri log)"}]},{"@type":"WebSite","@id":"https:\/\/www.visilay.com\/it\/#website","url":"https:\/\/www.visilay.com\/it\/","name":"Visilay","description":"Visilay","publisher":{"@id":"https:\/\/www.visilay.com\/it\/#organization"},"alternateName":"Visilay marketing services for B2B","potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/www.visilay.com\/it\/?s={search_term_string}"},"query-input":{"@type":"PropertyValueSpecification","valueRequired":true,"valueName":"search_term_string"}}],"inLanguage":"it-IT"},{"@type":"Organization","@id":"https:\/\/www.visilay.com\/it\/#organization","name":"Visilay","alternateName":"Visilay marketing services for b2b","url":"https:\/\/www.visilay.com\/it\/","logo":{"@type":"ImageObject","inLanguage":"it-IT","@id":"https:\/\/www.visilay.com\/it\/#\/schema\/logo\/image\/","url":"https:\/\/www.visilay.com\/wp-content\/uploads\/2024\/09\/logo-visilay-mark-purple.png","contentUrl":"https:\/\/www.visilay.com\/wp-content\/uploads\/2024\/09\/logo-visilay-mark-purple.png","width":512,"height":512,"caption":"Visilay"},"image":{"@id":"https:\/\/www.visilay.com\/it\/#\/schema\/logo\/image\/"}},{"@type":"Person","@id":"https:\/\/www.visilay.com\/it\/#\/schema\/person\/cd1f8d753b965cacbae0a53347a87b90","name":"Matteo Pellegrini","image":{"@type":"ImageObject","inLanguage":"it-IT","@id":"https:\/\/secure.gravatar.com\/avatar\/31533f37c71f18c7ee75fe617374494f6ba9c75120331ce756c7ad433d5f5668?s=96&d=mm&r=g","url":"https:\/\/secure.gravatar.com\/avatar\/31533f37c71f18c7ee75fe617374494f6ba9c75120331ce756c7ad433d5f5668?s=96&d=mm&r=g","contentUrl":"https:\/\/secure.gravatar.com\/avatar\/31533f37c71f18c7ee75fe617374494f6ba9c75120331ce756c7ad433d5f5668?s=96&d=mm&r=g","caption":"Matteo Pellegrini"},"description":"I\u2019m a Business Developer, and at Visilay I focus on developing data-driven SEO, Google Ads, and CRO strategies. I love historical museums, have been practicing Karate for as long as I can remember, and on weekends I enjoy exploring Italian villages in search of authentic local food."},{"@type":"Question","@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759701","position":1,"url":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759701","name":"Cos'\u00e8 un crawler AI?","answerCount":1,"acceptedAnswer":{"@type":"Answer","text":"\u00c8 un bot che visita i siti per conto di un'azienda di intelligenza artificiale. Pu\u00f2 raccogliere testi per l'addestramento, come GPTBot, indicizzare pagine per le risposte con ricerca, come OAI-SearchBot, o aprire pagine in tempo reale su richiesta di un utente, come ChatGPT-User.","inLanguage":"it-IT"},"inLanguage":"it-IT"},{"@type":"Question","@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759702","position":2,"url":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759702","name":"Bloccare GPTBot mi toglie da ChatGPT?","answerCount":1,"acceptedAnswer":{"@type":"Answer","text":"No. GPTBot serve all'addestramento. Per le risposte con ricerca web ChatGPT usa OAI-SearchBot: bloccando quello il sito esce dai riassunti di ChatGPT search.","inLanguage":"it-IT"},"inLanguage":"it-IT"},{"@type":"Question","@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759703","position":3,"url":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759703","name":"Posso bloccare le AI Overview senza uscire da Google?","answerCount":1,"acceptedAnswer":{"@type":"Answer","text":"Non con il robots.txt, perch\u00e9 AI Overview e AI Mode usano Googlebot. Search Console offre da giugno 2026 un'impostazione per escludere il sito dalle funzioni AI, valida per tutto il dominio.","inLanguage":"it-IT"},"inLanguage":"it-IT"},{"@type":"Question","@id":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759704","position":4,"url":"https:\/\/www.visilay.com\/it\/blog\/crawler-ai\/#faq-question-1759704","name":"Perch\u00e9 i crawler AI fanno cos\u00ec tante richieste?","answerCount":1,"acceptedAnswer":{"@type":"Answer","text":"Perch\u00e9 scaricano molte pagine e mandano pochi visitatori. Cloudflare ha calcolato nel 2025 che Anthropic faceva circa 70.900 richieste per ogni visita rimandata a un sito. Sul nostro sito, in quattro settimane, i bot di OpenAI hanno fatto 4.773 richieste e ChatGPT ha mandato 18 visite.","inLanguage":"it-IT"},"inLanguage":"it-IT"}]}},"_links":{"self":[{"href":"https:\/\/www.visilay.com\/it\/wp-json\/wp\/v2\/posts\/12556","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.visilay.com\/it\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.visilay.com\/it\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.visilay.com\/it\/wp-json\/wp\/v2\/users\/12"}],"replies":[{"embeddable":true,"href":"https:\/\/www.visilay.com\/it\/wp-json\/wp\/v2\/comments?post=12556"}],"version-history":[{"count":0,"href":"https:\/\/www.visilay.com\/it\/wp-json\/wp\/v2\/posts\/12556\/revisions"}],"wp:attachment":[{"href":"https:\/\/www.visilay.com\/it\/wp-json\/wp\/v2\/media?parent=12556"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.visilay.com\/it\/wp-json\/wp\/v2\/categories?post=12556"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.visilay.com\/it\/wp-json\/wp\/v2\/tags?post=12556"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}