OAI-SearchBot : ce que c'est, ses plages d'IP et comment le bloquer

Il lit une page pour la recherche d'une IA ou pour une personne qui l'a demandée à un assistant, et peut amener des visiteurs. Bot Protection le laisse passer par défaut ; vous pouvez le bloquer.

Comment le vérifier

N'importe quel bot peut écrire OAI-SearchBot dans son User-Agent. Une requête est OAI-SearchBot seulement si son adresse est dans la liste publiée par OpenAI ci-dessous : vérifiez l'adresse, pas le nom.

Comment le bloquer

Avec robots.txt, vous lui demandez de rester dehors :

User-agent: OAI-SearchBot
Disallow: /

robots.txt est une demande, pas un blocage, et ne distingue pas le vrai crawler d'un bot qui porte son nom. Bot Protection vérifie OAI-SearchBot par son adresse à chaque requête et lui répond comme vous le choisissez sur la page Configuration, par type ou pour OAI-SearchBot seul ; un bot qui ne fait que porter le nom est jugé comme n'importe quel autre bot.

Ses plages d'IP

D'après la liste de OpenAI, téléchargée à nouveau chaque jour.

IPv4

104.210.140.128/28
13.66.216.176/28
135.234.64.0/24
172.182.193.224/28
172.182.193.80/28
172.182.194.144/28
172.182.194.32/28
172.182.195.48/28
172.182.209.208/28
172.182.211.192/28
172.182.213.192/28
172.182.224.0/28
172.203.190.112/28
172.203.190.128/28
172.203.190.80/28
20.14.99.96/28
20.168.18.32/28
20.169.6.224/28
20.169.7.48/28
20.169.77.0/25
20.171.123.64/28
20.171.53.224/28
20.25.151.224/28
20.42.10.176/28
23.102.145.48/28
4.227.36.0/25
40.67.175.0/25
40.90.214.16/28
51.8.102.0/24
74.7.175.128/25
74.7.228.0/25
74.7.228.128/25
74.7.229.0/25
74.7.229.128/25
74.7.230.0/25
74.7.241.128/25
74.7.242.128/25
74.7.243.0/25
74.7.244.0/25