Bots de IA
Los crawlers de IA, y cómo reconocer los verdaderos
Cada crawler de IA de abajo se identifica en su User-Agent, y su proveedor publica las direcciones desde las que rastrea. Cualquiera puede escribir el nombre; solo la dirección lo demuestra. Los rangos de aquí son las listas de los propios proveedores, descargadas de nuevo cada día, las mismas con las que Bot Protection verifica cada solicitud.
| Bot de IA | Proveedor | Para qué sirve | Rangos de IP |
|---|---|---|---|
GPTBot | OpenAI | Entrenamiento de IA | 18 |
OAI-SearchBot | OpenAI | Búsqueda y respuestas con IA | 39 |
ChatGPT-User | OpenAI | Búsqueda y respuestas con IA | 234 |
OAI-AdsBot | OpenAI | Búsqueda y respuestas con IA | 2 |
ClaudeBot | Anthropic | Entrenamiento de IA | 14 |
Claude-User | Anthropic | Búsqueda y respuestas con IA | 14 |
Claude-SearchBot | Anthropic | Búsqueda y respuestas con IA | 14 |
PerplexityBot | Perplexity | Búsqueda y respuestas con IA | 8 |
Perplexity-User | Perplexity | Búsqueda y respuestas con IA | 4 |
CCBot | Common Crawl | Entrenamiento de IA | 5 |
Google-CloudVertexBot | Búsqueda y respuestas con IA | 317 | |
Google-Agent | Búsqueda y respuestas con IA | 20 | |
DuckAssistBot | DuckDuckGo | Búsqueda y respuestas con IA | 486 |
MistralAI-User | Mistral AI | Búsqueda y respuestas con IA | 4 |
MistralAI-Index | Mistral AI | Búsqueda y respuestas con IA | 2 |
Los crawlers de entrenamiento de IA toman páginas para entrenar modelos y no traen a nadie de vuelta; los de búsqueda y respuestas con IA leen una página para la búsqueda de una IA o para una persona que se lo pidió a un asistente. Los crawlers cuyos proveedores no publican direcciones no están en la lista: su nombre no se puede verificar.