AI ボット
ClaudeBot: 正体、IP レンジ、ブロックの方法
ClaudeBot は Anthropic の AI 学習 向けクローラーです。
| ベンダー | Anthropic |
|---|---|
| 用途 | AI 学習 |
| User-Agent 内の名前 | ClaudeBot |
| ベンダーのアドレスリスト | https://claude.com/crawling/bots.json |
| IP レンジ | 14 |
AI モデルの学習のためにページを取得し、あなたのサイトに訪問者を送り返しません。Bot Protection は既定でブロックします。通すこともできます。
検証の方法
どのボットでも User-Agent に ClaudeBot と書けます。リクエストが ClaudeBot なのは、そのアドレスが下の Anthropic の公開リストにあるときだけです。名前ではなくアドレスを確認してください。
ブロックの方法
robots.txt では、立ち入らないよう依頼します:
User-agent: ClaudeBot Disallow: /
robots.txt はお願いであってブロックではなく、本物のクローラーと名前を名乗るボットを見分けられません。Bot Protection はすべてのリクエストで ClaudeBot をアドレスで検証し、セットアップページで選んだとおりに応答します。種類ごとにも、ClaudeBot だけにも選べます。名前を名乗るだけのボットは、ほかのボットと同じように判定されます。
IP レンジ一覧
Anthropic 自身のリストより。毎日ダウンロードし直しています。
IPv4
216.73.216.0/22 34.162.230.222/32 34.162.244.71/32 34.162.191.81/32 34.162.86.102/32 136.79.143.251/32 136.83.20.215/32 34.162.111.78/32 34.162.90.102/32 34.162.27.34/32 34.152.124.140/32 34.153.21.190/32 34.186.252.4/32 34.162.153.71/32