AI ボット
Claude-SearchBot: 正体、IP レンジ、ブロックの方法
Claude-SearchBot は Anthropic の AI 検索と回答 向けクローラーです。
| ベンダー | Anthropic |
|---|---|
| 用途 | AI 検索と回答 |
| User-Agent 内の名前 | Claude-SearchBot |
| ベンダーのアドレスリスト | https://claude.com/crawling/bots.json |
| IP レンジ | 14 |
AI の検索や、アシスタントに頼んだ人のためにページを読み、訪問者をもたらすことがあります。Bot Protection は既定で通します。ブロックすることもできます。
検証の方法
どのボットでも User-Agent に Claude-SearchBot と書けます。リクエストが Claude-SearchBot なのは、そのアドレスが下の Anthropic の公開リストにあるときだけです。名前ではなくアドレスを確認してください。
ブロックの方法
robots.txt では、立ち入らないよう依頼します:
User-agent: Claude-SearchBot Disallow: /
robots.txt はお願いであってブロックではなく、本物のクローラーと名前を名乗るボットを見分けられません。Bot Protection はすべてのリクエストで Claude-SearchBot をアドレスで検証し、セットアップページで選んだとおりに応答します。種類ごとにも、Claude-SearchBot だけにも選べます。名前を名乗るだけのボットは、ほかのボットと同じように判定されます。
IP レンジ一覧
Anthropic 自身のリストより。毎日ダウンロードし直しています。
IPv4
216.73.216.0/22 34.162.230.222/32 34.162.244.71/32 34.162.191.81/32 34.162.86.102/32 136.79.143.251/32 136.83.20.215/32 34.162.111.78/32 34.162.90.102/32 34.162.27.34/32 34.152.124.140/32 34.153.21.190/32 34.186.252.4/32 34.162.153.71/32