Bots verificados
Os crawlers e agentes de IA que o Bot Protection verifica
Cada bot abaixo diz quem é, e seu fornecedor publica como provar: os endereços de onde ele rastreia, ou as chaves com que assina suas requisições. Qualquer um pode escrever o nome de um bot; só o endereço ou a assinatura o provam. Estas são as listas dos próprios fornecedores, lidas de novo todo dia, as mesmas com que o Bot Protection verifica cada requisição.
Buscadores
| Bot | Fornecedor | Verificado por | Por padrão |
|---|---|---|---|
Googlebot | Endereços publicados | Deixar passar | |
Applebot | Apple | Endereços publicados | Deixar passar |
DuckDuckBot | DuckDuckGo | Endereços publicados | Deixar passar |
Assistentes de IA e busca com IA
| Bot | Fornecedor | Verificado por | Por padrão |
|---|---|---|---|
OAI-SearchBot | OpenAI | Endereços publicados | Deixar passar |
ChatGPT-User | OpenAI | Endereços publicados | Deixar passar |
OAI-AdsBot | OpenAI | Endereços publicados | Deixar passar |
Claude-User | Anthropic | Endereços publicados | Deixar passar |
Claude-SearchBot | Anthropic | Endereços publicados | Deixar passar |
PerplexityBot | Perplexity | Endereços publicados | Deixar passar |
Perplexity-User | Perplexity | Endereços publicados | Deixar passar |
Google-CloudVertexBot | Endereços publicados | Deixar passar | |
Google-Agent | Endereços publicados | Deixar passar | |
DuckAssistBot | DuckDuckGo | Endereços publicados | Deixar passar |
MistralAI-User | Mistral AI | Endereços publicados | Deixar passar |
MistralAI-Index | Mistral AI | Endereços publicados | Deixar passar |
Agentes de IA
| Bot | Fornecedor | Verificado por | Por padrão |
|---|---|---|---|
ChatGPT agent | OpenAI | Assinatura Web Bot Auth | Deixar passar |
Crawlers de scraping e de treinamento de IA
| Bot | Fornecedor | Verificado por | Por padrão |
|---|---|---|---|
GPTBot | OpenAI | Endereços publicados | Bloquear |
ClaudeBot | Anthropic | Endereços publicados | Bloquear |
CCBot | Common Crawl | Endereços publicados | Bloquear |
Ferramentas de SEO
| Bot | Fornecedor | Verificado por | Por padrão |
|---|---|---|---|
AhrefsBot | Ahrefs | Endereços publicados | Deixar passar |
AhrefsSiteAudit | Ahrefs | Endereços publicados | Deixar passar |
Prévias de links
| Bot | Fornecedor | Verificado por | Por padrão |
|---|---|---|---|
TelegramBot | Telegram | Endereços publicados | Deixar passar |
Monitores de disponibilidade
| Bot | Fornecedor | Verificado por | Por padrão |
|---|---|---|---|
UptimeRobot | UptimeRobot | Endereços publicados | Deixar passar |
Pingdom.com_bot | Pingdom | Endereços publicados | Deixar passar |
Better Uptime Bot | Better Stack | Endereços publicados | Deixar passar |
Scanners da internet
| Bot | Fornecedor | Verificado por | Por padrão |
|---|---|---|---|
CensysInspect | Censys | Endereços publicados | Bloquear |
Expanse | Palo Alto Networks | Endereços publicados | Bloquear |
Por padrão é o que o Bot Protection responde a um bot verificado até você escolher: na página Configuração você deixa passar ou bloqueia cada tipo, ou cada bot sozinho.
Com nome, nunca verificados
Estes crawlers se identificam no User-Agent, mas seus fornecedores não publicam endereços nem chaves que provem isso, então o nome sozinho não prova nada: uma requisição que o usa é julgada como qualquer outro visitante.
| Bot | Fornecedor | Para que serve |
|---|---|---|
Amazonbot | Amazon | Treinamento de IA |
Amzn-SearchBot | Amazon | Busca e respostas com IA |
Amzn-User | Amazon | Busca e respostas com IA |
meta-externalagent | Meta | Treinamento de IA |
meta-externalfetcher | Meta | Busca e respostas com IA |
Meta-WebIndexer | Meta | Busca e respostas com IA |
bingbot | Microsoft | Buscador |
Bytespider | ByteDance | Treinamento de IA |
cohere-ai | Cohere | Treinamento de IA |
AI2Bot | Allen Institute for AI | Treinamento de IA |
SemrushBot | Semrush | Ferramenta de SEO |
MJ12bot | Majestic | Ferramenta de SEO |
facebookexternalhit | Meta | Prévia de link |
Twitterbot | X | Prévia de link |
Slackbot | Slack | Prévia de link |
LinkedInBot | Prévia de link | |
Discordbot | Discord | Prévia de link |