OAI-SearchBot: 正体、IP レンジ、ブロックの方法

AI の検索や、アシスタントに頼んだ人のためにページを読み、訪問者をもたらすことがあります。Bot Protection は既定で通します。ブロックすることもできます。

検証の方法

どのボットでも User-Agent に OAI-SearchBot と書けます。リクエストが OAI-SearchBot なのは、そのアドレスが下の OpenAI の公開リストにあるときだけです。名前ではなくアドレスを確認してください。

ブロックの方法

robots.txt では、立ち入らないよう依頼します:

User-agent: OAI-SearchBot
Disallow: /

robots.txt はお願いであってブロックではなく、本物のクローラーと名前を名乗るボットを見分けられません。Bot Protection はすべてのリクエストで OAI-SearchBot をアドレスで検証し、セットアップページで選んだとおりに応答します。種類ごとにも、OAI-SearchBot だけにも選べます。名前を名乗るだけのボットは、ほかのボットと同じように判定されます。

IP レンジ一覧

OpenAI 自身のリストより。毎日ダウンロードし直しています。

IPv4

104.210.140.128/28
13.66.216.176/28
135.234.64.0/24
172.182.193.224/28
172.182.193.80/28
172.182.194.144/28
172.182.194.32/28
172.182.195.48/28
172.182.209.208/28
172.182.211.192/28
172.182.213.192/28
172.182.224.0/28
172.203.190.112/28
172.203.190.128/28
172.203.190.80/28
20.14.99.96/28
20.168.18.32/28
20.169.6.224/28
20.169.7.48/28
20.169.77.0/25
20.171.123.64/28
20.171.53.224/28
20.25.151.224/28
20.42.10.176/28
23.102.145.48/28
4.227.36.0/25
40.67.175.0/25
40.90.214.16/28
51.8.102.0/24
74.7.175.128/25
74.7.228.0/25
74.7.228.128/25
74.7.229.0/25
74.7.229.128/25
74.7.230.0/25
74.7.241.128/25
74.7.242.128/25
74.7.243.0/25
74.7.244.0/25