Elenco dei bot
I crawler e gli agenti IA che Bot Protection verifica
Ogni bot qui sotto dice chi è, e il suo fornitore pubblica come dimostrarlo: gli indirizzi da cui scansiona, o le chiavi con cui firma le sue richieste. Chiunque può scrivere il nome di un bot; solo l'indirizzo o la firma lo dimostrano. Sono gli elenchi dei fornitori stessi, riletti ogni giorno, gli stessi con cui Bot Protection verifica ogni richiesta.
Motori di ricerca
| Bot | Fornitore | Verificato tramite | Predefinito |
|---|---|---|---|
Googlebot | Indirizzi pubblicati | Lascia passare | |
Applebot | Apple | Indirizzi pubblicati | Lascia passare |
DuckDuckBot | DuckDuckGo | Indirizzi pubblicati | Lascia passare |
Assistenti di IA e ricerca con IA
| Bot | Fornitore | Verificato tramite | Predefinito |
|---|---|---|---|
OAI-SearchBot | OpenAI | Indirizzi pubblicati | Lascia passare |
ChatGPT-User | OpenAI | Indirizzi pubblicati | Lascia passare |
OAI-AdsBot | OpenAI | Indirizzi pubblicati | Lascia passare |
Claude-User | Anthropic | Indirizzi pubblicati | Lascia passare |
Claude-SearchBot | Anthropic | Indirizzi pubblicati | Lascia passare |
PerplexityBot | Perplexity | Indirizzi pubblicati | Lascia passare |
Perplexity-User | Perplexity | Indirizzi pubblicati | Lascia passare |
Google-CloudVertexBot | Indirizzi pubblicati | Lascia passare | |
Google-Agent | Indirizzi pubblicati | Lascia passare | |
DuckAssistBot | DuckDuckGo | Indirizzi pubblicati | Lascia passare |
MistralAI-User | Mistral AI | Indirizzi pubblicati | Lascia passare |
MistralAI-Index | Mistral AI | Indirizzi pubblicati | Lascia passare |
Agenti IA
| Bot | Fornitore | Verificato tramite | Predefinito |
|---|---|---|---|
ChatGPT agent | OpenAI | Firma Web Bot Auth | Lascia passare |
Crawler di scraping e di addestramento IA
| Bot | Fornitore | Verificato tramite | Predefinito |
|---|---|---|---|
GPTBot | OpenAI | Indirizzi pubblicati | Blocca |
ClaudeBot | Anthropic | Indirizzi pubblicati | Blocca |
CCBot | Common Crawl | Indirizzi pubblicati | Blocca |
Strumenti SEO
| Bot | Fornitore | Verificato tramite | Predefinito |
|---|---|---|---|
AhrefsBot | Ahrefs | Indirizzi pubblicati | Lascia passare |
AhrefsSiteAudit | Ahrefs | Indirizzi pubblicati | Lascia passare |
Anteprime dei link
| Bot | Fornitore | Verificato tramite | Predefinito |
|---|---|---|---|
TelegramBot | Telegram | Indirizzi pubblicati | Lascia passare |
Monitor di disponibilità
| Bot | Fornitore | Verificato tramite | Predefinito |
|---|---|---|---|
UptimeRobot | UptimeRobot | Indirizzi pubblicati | Lascia passare |
Pingdom.com_bot | Pingdom | Indirizzi pubblicati | Lascia passare |
Better Uptime Bot | Better Stack | Indirizzi pubblicati | Lascia passare |
Scanner di Internet
| Bot | Fornitore | Verificato tramite | Predefinito |
|---|---|---|---|
CensysInspect | Censys | Indirizzi pubblicati | Blocca |
Expanse | Palo Alto Networks | Indirizzi pubblicati | Blocca |
Predefinito è ciò che Bot Protection risponde a un bot verificato finché non scegli: nella pagina Configurazione lasci passare o blocchi ogni tipo, o ogni bot singolarmente.
Con nome, mai verificati
Questi crawler si dichiarano nel loro User-Agent, ma i loro fornitori non pubblicano indirizzi né chiavi per dimostrarlo, quindi il nome da solo non dimostra nulla: una richiesta che lo usa è giudicata come qualsiasi altro visitatore.
| Bot | Fornitore | A cosa serve |
|---|---|---|
Amazonbot | Amazon | Addestramento IA |
Amzn-SearchBot | Amazon | Ricerca e risposte IA |
Amzn-User | Amazon | Ricerca e risposte IA |
meta-externalagent | Meta | Addestramento IA |
meta-externalfetcher | Meta | Ricerca e risposte IA |
Meta-WebIndexer | Meta | Ricerca e risposte IA |
bingbot | Microsoft | Motore di ricerca |
Bytespider | ByteDance | Addestramento IA |
cohere-ai | Cohere | Addestramento IA |
AI2Bot | Allen Institute for AI | Addestramento IA |
SemrushBot | Semrush | Strumento SEO |
MJ12bot | Majestic | Strumento SEO |
facebookexternalhit | Meta | Anteprima dei link |
Twitterbot | X | Anteprima dei link |
Slackbot | Slack | Anteprima dei link |
LinkedInBot | Anteprima dei link | |
Discordbot | Discord | Anteprima dei link |