AI-bots
ClaudeBot: wat het is, de IP-bereiken en hoe u het blokkeert
ClaudeBot is de crawler van Anthropic voor AI-training.
| Leverancier | Anthropic |
|---|---|
| Waarvoor hij dient | AI-training |
| In zijn User-Agent | ClaudeBot |
| De adreslijst van de leverancier | https://claude.com/crawling/bots.json |
| IP-bereiken | 14 |
Hij neemt pagina's om AI-modellen te trainen en stuurt niemand terug naar uw site. Bot Protection blokkeert hem standaard; u kunt hem doorlaten.
Hoe u hem verifieert
Elke bot kan ClaudeBot in zijn User-Agent schrijven. Een verzoek is alleen ClaudeBot als het adres in de hieronder gepubliceerde lijst van Anthropic staat: controleer het adres, niet de naam.
Hoe u hem blokkeert
Met robots.txt vraagt u hem weg te blijven:
User-agent: ClaudeBot Disallow: /
robots.txt is een verzoek, geen blokkade, en kan de echte crawler niet onderscheiden van een bot die zijn naam draagt. Bot Protection verifieert ClaudeBot bij elk verzoek aan zijn adres en antwoordt zoals u kiest op de pagina Set-up, per soort of alleen voor ClaudeBot; een bot die alleen de naam draagt, wordt beoordeeld als elke andere bot.
De IP-bereiken
Uit de eigen lijst van Anthropic, elke dag opnieuw gedownload.
IPv4
216.73.216.0/22 34.162.230.222/32 34.162.244.71/32 34.162.191.81/32 34.162.86.102/32 136.79.143.251/32 136.83.20.215/32 34.162.111.78/32 34.162.90.102/32 34.162.27.34/32 34.152.124.140/32 34.153.21.190/32 34.186.252.4/32 34.162.153.71/32