Korzen
Bot Protection

Elenco dei bot

I crawler e gli agenti IA che Bot Protection verifica

Ogni bot qui sotto dice chi è, e il suo fornitore pubblica come dimostrarlo: gli indirizzi da cui scansiona, o le chiavi con cui firma le sue richieste. Chiunque può scrivere il nome di un bot; solo l'indirizzo o la firma lo dimostrano. Sono gli elenchi dei fornitori stessi, riletti ogni giorno, gli stessi con cui Bot Protection verifica ogni richiesta.

BotFornitoreVerificato tramitePredefinito
GooglebotGoogleIndirizzi pubblicatiLascia passare
ApplebotAppleIndirizzi pubblicatiLascia passare
DuckDuckBotDuckDuckGoIndirizzi pubblicatiLascia passare

Assistenti di IA e ricerca con IA

BotFornitoreVerificato tramitePredefinito
OAI-SearchBotOpenAIIndirizzi pubblicatiLascia passare
ChatGPT-UserOpenAIIndirizzi pubblicatiLascia passare
OAI-AdsBotOpenAIIndirizzi pubblicatiLascia passare
Claude-UserAnthropicIndirizzi pubblicatiLascia passare
Claude-SearchBotAnthropicIndirizzi pubblicatiLascia passare
PerplexityBotPerplexityIndirizzi pubblicatiLascia passare
Perplexity-UserPerplexityIndirizzi pubblicatiLascia passare
Google-CloudVertexBotGoogleIndirizzi pubblicatiLascia passare
Google-AgentGoogleIndirizzi pubblicatiLascia passare
DuckAssistBotDuckDuckGoIndirizzi pubblicatiLascia passare
MistralAI-UserMistral AIIndirizzi pubblicatiLascia passare
MistralAI-IndexMistral AIIndirizzi pubblicatiLascia passare

Agenti IA

BotFornitoreVerificato tramitePredefinito
ChatGPT agentOpenAIFirma Web Bot AuthLascia passare

Crawler di scraping e di addestramento IA

BotFornitoreVerificato tramitePredefinito
GPTBotOpenAIIndirizzi pubblicatiBlocca
ClaudeBotAnthropicIndirizzi pubblicatiBlocca
CCBotCommon CrawlIndirizzi pubblicatiBlocca

Strumenti SEO

BotFornitoreVerificato tramitePredefinito
AhrefsBotAhrefsIndirizzi pubblicatiLascia passare
AhrefsSiteAuditAhrefsIndirizzi pubblicatiLascia passare

Anteprime dei link

BotFornitoreVerificato tramitePredefinito
TelegramBotTelegramIndirizzi pubblicatiLascia passare

Monitor di disponibilità

BotFornitoreVerificato tramitePredefinito
UptimeRobotUptimeRobotIndirizzi pubblicatiLascia passare
Pingdom.com_botPingdomIndirizzi pubblicatiLascia passare
Better Uptime BotBetter StackIndirizzi pubblicatiLascia passare

Scanner di Internet

BotFornitoreVerificato tramitePredefinito
CensysInspectCensysIndirizzi pubblicatiBlocca
ExpansePalo Alto NetworksIndirizzi pubblicatiBlocca

Predefinito è ciò che Bot Protection risponde a un bot verificato finché non scegli: nella pagina Configurazione lasci passare o blocchi ogni tipo, o ogni bot singolarmente.

Con nome, mai verificati

Questi crawler si dichiarano nel loro User-Agent, ma i loro fornitori non pubblicano indirizzi né chiavi per dimostrarlo, quindi il nome da solo non dimostra nulla: una richiesta che lo usa è giudicata come qualsiasi altro visitatore.

BotFornitoreA cosa serve
AmazonbotAmazonAddestramento IA
Amzn-SearchBotAmazonRicerca e risposte IA
Amzn-UserAmazonRicerca e risposte IA
meta-externalagentMetaAddestramento IA
meta-externalfetcherMetaRicerca e risposte IA
Meta-WebIndexerMetaRicerca e risposte IA
bingbotMicrosoftMotore di ricerca
BytespiderByteDanceAddestramento IA
cohere-aiCohereAddestramento IA
AI2BotAllen Institute for AIAddestramento IA
SemrushBotSemrushStrumento SEO
MJ12botMajesticStrumento SEO
facebookexternalhitMetaAnteprima dei link
TwitterbotXAnteprima dei link
SlackbotSlackAnteprima dei link
LinkedInBotLinkedInAnteprima dei link
DiscordbotDiscordAnteprima dei link