Directorio de bots
Los rastreadores y agentes de IA que Bot Protection verifica
Cada bot de abajo dice quién es, y su proveedor publica cómo probarlo: las direcciones desde las que rastrea, o las claves con las que firma sus solicitudes. Cualquiera puede escribir el nombre de un bot; solo la dirección o la firma lo prueban. Son las listas de los propios proveedores, leídas de nuevo cada día, las mismas con las que Bot Protection verifica cada solicitud.
Buscadores
| Bot | Proveedor | Verificado por | Por defecto |
|---|---|---|---|
Googlebot | Direcciones publicadas | Dejar pasar | |
Applebot | Apple | Direcciones publicadas | Dejar pasar |
DuckDuckBot | DuckDuckGo | Direcciones publicadas | Dejar pasar |
Asistentes de IA y búsqueda con IA
| Bot | Proveedor | Verificado por | Por defecto |
|---|---|---|---|
OAI-SearchBot | OpenAI | Direcciones publicadas | Dejar pasar |
ChatGPT-User | OpenAI | Direcciones publicadas | Dejar pasar |
OAI-AdsBot | OpenAI | Direcciones publicadas | Dejar pasar |
Claude-User | Anthropic | Direcciones publicadas | Dejar pasar |
Claude-SearchBot | Anthropic | Direcciones publicadas | Dejar pasar |
PerplexityBot | Perplexity | Direcciones publicadas | Dejar pasar |
Perplexity-User | Perplexity | Direcciones publicadas | Dejar pasar |
Google-CloudVertexBot | Direcciones publicadas | Dejar pasar | |
Google-Agent | Direcciones publicadas | Dejar pasar | |
DuckAssistBot | DuckDuckGo | Direcciones publicadas | Dejar pasar |
MistralAI-User | Mistral AI | Direcciones publicadas | Dejar pasar |
MistralAI-Index | Mistral AI | Direcciones publicadas | Dejar pasar |
Agentes de IA
| Bot | Proveedor | Verificado por | Por defecto |
|---|---|---|---|
ChatGPT agent | OpenAI | Firma Web Bot Auth | Dejar pasar |
Rastreadores de scraping y de entrenamiento de IA
| Bot | Proveedor | Verificado por | Por defecto |
|---|---|---|---|
GPTBot | OpenAI | Direcciones publicadas | Bloquear |
ClaudeBot | Anthropic | Direcciones publicadas | Bloquear |
CCBot | Common Crawl | Direcciones publicadas | Bloquear |
Herramientas de SEO
| Bot | Proveedor | Verificado por | Por defecto |
|---|---|---|---|
AhrefsBot | Ahrefs | Direcciones publicadas | Dejar pasar |
AhrefsSiteAudit | Ahrefs | Direcciones publicadas | Dejar pasar |
Vistas previas de enlaces
| Bot | Proveedor | Verificado por | Por defecto |
|---|---|---|---|
TelegramBot | Telegram | Direcciones publicadas | Dejar pasar |
Monitores de disponibilidad
| Bot | Proveedor | Verificado por | Por defecto |
|---|---|---|---|
UptimeRobot | UptimeRobot | Direcciones publicadas | Dejar pasar |
Pingdom.com_bot | Pingdom | Direcciones publicadas | Dejar pasar |
Better Uptime Bot | Better Stack | Direcciones publicadas | Dejar pasar |
Escáneres de internet
| Bot | Proveedor | Verificado por | Por defecto |
|---|---|---|---|
CensysInspect | Censys | Direcciones publicadas | Bloquear |
Expanse | Palo Alto Networks | Direcciones publicadas | Bloquear |
Por defecto es lo que Bot Protection responde a un bot verificado hasta que elijas: en la página Configuración dejas pasar o bloqueas cada tipo, o cada bot por separado.
Con nombre, nunca verificados
Estos rastreadores se identifican en su User-Agent, pero sus proveedores no publican direcciones ni claves que lo prueben, así que el nombre solo no prueba nada: una solicitud que lo lleva se juzga como cualquier otro visitante.
| Bot | Proveedor | Para qué sirve |
|---|---|---|
Amazonbot | Amazon | Entrenamiento de IA |
Amzn-SearchBot | Amazon | Búsqueda y respuestas con IA |
Amzn-User | Amazon | Búsqueda y respuestas con IA |
meta-externalagent | Meta | Entrenamiento de IA |
meta-externalfetcher | Meta | Búsqueda y respuestas con IA |
Meta-WebIndexer | Meta | Búsqueda y respuestas con IA |
bingbot | Microsoft | Buscador |
Bytespider | ByteDance | Entrenamiento de IA |
cohere-ai | Cohere | Entrenamiento de IA |
AI2Bot | Allen Institute for AI | Entrenamiento de IA |
SemrushBot | Semrush | Herramienta de SEO |
MJ12bot | Majestic | Herramienta de SEO |
facebookexternalhit | Meta | Vista previa de enlaces |
Twitterbot | X | Vista previa de enlaces |
Slackbot | Slack | Vista previa de enlaces |
LinkedInBot | Vista previa de enlaces | |
Discordbot | Discord | Vista previa de enlaces |