AI-bots
Claude-SearchBot: wat het is, de IP-bereiken en hoe u het blokkeert
Claude-SearchBot is de crawler van Anthropic voor AI-zoeken en -antwoorden.
| Leverancier | Anthropic |
|---|---|
| Waarvoor hij dient | AI-zoeken en -antwoorden |
| In zijn User-Agent | Claude-SearchBot |
| De adreslijst van de leverancier | https://claude.com/crawling/bots.json |
| IP-bereiken | 14 |
Hij leest een pagina voor de zoekopdracht van een AI of voor iemand die het een assistent vroeg, en kan bezoekers brengen. Bot Protection laat hem standaard door; u kunt hem blokkeren.
Hoe u hem verifieert
Elke bot kan Claude-SearchBot in zijn User-Agent schrijven. Een verzoek is alleen Claude-SearchBot als het adres in de hieronder gepubliceerde lijst van Anthropic staat: controleer het adres, niet de naam.
Hoe u hem blokkeert
Met robots.txt vraagt u hem weg te blijven:
User-agent: Claude-SearchBot Disallow: /
robots.txt is een verzoek, geen blokkade, en kan de echte crawler niet onderscheiden van een bot die zijn naam draagt. Bot Protection verifieert Claude-SearchBot bij elk verzoek aan zijn adres en antwoordt zoals u kiest op de pagina Set-up, per soort of alleen voor Claude-SearchBot; een bot die alleen de naam draagt, wordt beoordeeld als elke andere bot.
De IP-bereiken
Uit de eigen lijst van Anthropic, elke dag opnieuw gedownload.
IPv4
216.73.216.0/22 34.162.230.222/32 34.162.244.71/32 34.162.191.81/32 34.162.86.102/32 136.79.143.251/32 136.83.20.215/32 34.162.111.78/32 34.162.90.102/32 34.162.27.34/32 34.152.124.140/32 34.153.21.190/32 34.186.252.4/32 34.162.153.71/32