Bots IA
OAI-AdsBot : ce que c'est, ses plages d'IP et comment le bloquer
OAI-AdsBot est le crawler de OpenAI pour Recherche et réponses IA.
| Éditeur | OpenAI |
|---|---|
| À quoi il sert | Recherche et réponses IA |
| Dans son User-Agent | OAI-AdsBot |
| La liste d'adresses de son éditeur | https://openai.com/adsbot.json |
| Plages d'IP | 2 |
Il lit une page pour la recherche d'une IA ou pour une personne qui l'a demandée à un assistant, et peut amener des visiteurs. Bot Protection le laisse passer par défaut ; vous pouvez le bloquer.
Comment le vérifier
N'importe quel bot peut écrire OAI-AdsBot dans son User-Agent. Une requête est OAI-AdsBot seulement si son adresse est dans la liste publiée par OpenAI ci-dessous : vérifiez l'adresse, pas le nom.
Comment le bloquer
Avec robots.txt, vous lui demandez de rester dehors :
User-agent: OAI-AdsBot Disallow: /
robots.txt est une demande, pas un blocage, et ne distingue pas le vrai crawler d'un bot qui porte son nom. Bot Protection vérifie OAI-AdsBot par son adresse à chaque requête et lui répond comme vous le choisissez sur la page Configuration, par type ou pour OAI-AdsBot seul ; un bot qui ne fait que porter le nom est jugé comme n'importe quel autre bot.
Ses plages d'IP
D'après la liste de OpenAI, téléchargée à nouveau chaque jour.
IPv4
130.131.229.128/25 20.168.90.128/25