Glossario GEO

AI crawler

Un AI crawler è un bot che raccoglie contenuti dal web per addestrare o alimentare un modello linguistico o un answer engine.

Spiegazione estesa

Include GPTBot, ClaudeBot, PerplexityBot e Google-Extended, ciascuno con direttive robots.txt distinte da valutare singolarmente.

Esempio pratico

Il log analysis ha rivelato visite regolari di ClaudeBot e PerplexityBot oltre a GPTBot.

Perché conta per SEO e GEO

AI crawler appartiene al lavoro di ottimizzazione per i motori generativi. Va gestito insieme alla base SEO del sito, perché senza indicizzazione e autorità nessun intervento GEO produce citazioni stabili.

Termini correlati

• GPTBotGPTBot è il crawler di OpenAI che raccoglie contenuti dal web, affiancato da OAI-SearchBot per le ricerche in tempo reale.
• Robots.txtIl file robots.txt indica ai crawler quali aree di un sito possono scansionare.
• llms.txtIl file llms.txt è una proposta di standard che elenca in un formato semplice i contenuti principali di un sito pensati per essere letti dai modelli linguistici.