Annuaire des bots
Les robots d'exploration et agents IA que Bot Protection vérifie
Chaque bot ci-dessous dit qui il est, et son éditeur publie de quoi le prouver : les adresses d'où il explore, ou les clés avec lesquelles il signe ses requêtes. N'importe qui peut écrire le nom d'un bot ; seule l'adresse ou la signature le prouve. Ce sont les listes des éditeurs eux-mêmes, relues chaque jour, celles-là mêmes avec lesquelles Bot Protection vérifie chaque requête.
Moteurs de recherche
| Bot | Éditeur | Vérifié par | Par défaut |
|---|---|---|---|
Googlebot | Adresses publiées | Laisser passer | |
Applebot | Apple | Adresses publiées | Laisser passer |
DuckDuckBot | DuckDuckGo | Adresses publiées | Laisser passer |
Assistants d'IA et recherche par IA
| Bot | Éditeur | Vérifié par | Par défaut |
|---|---|---|---|
OAI-SearchBot | OpenAI | Adresses publiées | Laisser passer |
ChatGPT-User | OpenAI | Adresses publiées | Laisser passer |
OAI-AdsBot | OpenAI | Adresses publiées | Laisser passer |
Claude-User | Anthropic | Adresses publiées | Laisser passer |
Claude-SearchBot | Anthropic | Adresses publiées | Laisser passer |
PerplexityBot | Perplexity | Adresses publiées | Laisser passer |
Perplexity-User | Perplexity | Adresses publiées | Laisser passer |
Google-CloudVertexBot | Adresses publiées | Laisser passer | |
Google-Agent | Adresses publiées | Laisser passer | |
DuckAssistBot | DuckDuckGo | Adresses publiées | Laisser passer |
MistralAI-User | Mistral AI | Adresses publiées | Laisser passer |
MistralAI-Index | Mistral AI | Adresses publiées | Laisser passer |
Agents d'IA
| Bot | Éditeur | Vérifié par | Par défaut |
|---|---|---|---|
ChatGPT agent | OpenAI | Signature Web Bot Auth | Laisser passer |
Robots d'exploration de scraping et d'entraînement d'IA
| Bot | Éditeur | Vérifié par | Par défaut |
|---|---|---|---|
GPTBot | OpenAI | Adresses publiées | Bloquer |
ClaudeBot | Anthropic | Adresses publiées | Bloquer |
CCBot | Common Crawl | Adresses publiées | Bloquer |
Outils SEO
| Bot | Éditeur | Vérifié par | Par défaut |
|---|---|---|---|
AhrefsBot | Ahrefs | Adresses publiées | Laisser passer |
AhrefsSiteAudit | Ahrefs | Adresses publiées | Laisser passer |
Aperçus de liens
| Bot | Éditeur | Vérifié par | Par défaut |
|---|---|---|---|
TelegramBot | Telegram | Adresses publiées | Laisser passer |
Moniteurs de disponibilité
| Bot | Éditeur | Vérifié par | Par défaut |
|---|---|---|---|
UptimeRobot | UptimeRobot | Adresses publiées | Laisser passer |
Pingdom.com_bot | Pingdom | Adresses publiées | Laisser passer |
Better Uptime Bot | Better Stack | Adresses publiées | Laisser passer |
Scanners d'Internet
| Bot | Éditeur | Vérifié par | Par défaut |
|---|---|---|---|
CensysInspect | Censys | Adresses publiées | Bloquer |
Expanse | Palo Alto Networks | Adresses publiées | Bloquer |
Par défaut, c'est ce que Bot Protection répond à un bot vérifié tant que vous n'avez pas choisi : sur la page Configuration, vous laissez passer ou bloquez chaque type, ou chaque bot à part.
Nommés, jamais vérifiés
Ces robots d'exploration se nomment dans leur User-Agent, mais leurs éditeurs ne publient ni adresses ni clés pour le prouver ; le nom seul ne prouve donc rien : une requête qui le porte est jugée comme n'importe quel autre visiteur.
| Bot | Éditeur | À quoi il sert |
|---|---|---|
Amazonbot | Amazon | Entraînement IA |
Amzn-SearchBot | Amazon | Recherche et réponses IA |
Amzn-User | Amazon | Recherche et réponses IA |
meta-externalagent | Meta | Entraînement IA |
meta-externalfetcher | Meta | Recherche et réponses IA |
Meta-WebIndexer | Meta | Recherche et réponses IA |
bingbot | Microsoft | Moteur de recherche |
Bytespider | ByteDance | Entraînement IA |
cohere-ai | Cohere | Entraînement IA |
AI2Bot | Allen Institute for AI | Entraînement IA |
SemrushBot | Semrush | Outil SEO |
MJ12bot | Majestic | Outil SEO |
facebookexternalhit | Meta | Aperçu de liens |
Twitterbot | X | Aperçu de liens |
Slackbot | Slack | Aperçu de liens |
LinkedInBot | Aperçu de liens | |
Discordbot | Discord | Aperçu de liens |