KI-Bots
Claude-SearchBot: was es ist, seine IP-Bereiche und wie man es blockiert
Claude-SearchBot ist der Crawler von Anthropic für KI-Suche und -Antworten.
| Anbieter | Anthropic |
|---|---|
| Wofür er da ist | KI-Suche und -Antworten |
| In seinem User-Agent | Claude-SearchBot |
| Die Adressliste seines Anbieters | https://claude.com/crawling/bots.json |
| IP-Bereiche | 14 |
Er liest eine Seite für die Suche einer KI oder für eine Person, die einen Assistenten gefragt hat, und kann Besucher bringen. Bot Protection lässt ihn standardmäßig durch; Sie können ihn blockieren.
Wie man ihn verifiziert
Jeder Bot kann Claude-SearchBot in seinen User-Agent schreiben. Eine Anfrage ist nur dann Claude-SearchBot, wenn ihre Adresse in der unten veröffentlichten Liste von Anthropic steht: Prüfen Sie die Adresse, nicht den Namen.
Wie man ihn blockiert
Mit robots.txt bitten Sie ihn, draußen zu bleiben:
User-agent: Claude-SearchBot Disallow: /
robots.txt ist eine Bitte, keine Sperre, und unterscheidet den echten Crawler nicht von einem Bot mit seinem Namen. Bot Protection verifiziert Claude-SearchBot bei jeder Anfrage über seine Adresse und antwortet ihm, wie Sie es auf der Seite Einrichtung wählen, pro Art oder nur für Claude-SearchBot; ein Bot, der nur den Namen trägt, wird wie jeder andere Bot beurteilt.
Seine IP-Bereiche
Aus der eigenen Liste von Anthropic, jeden Tag neu heruntergeladen.
IPv4
216.73.216.0/22 34.162.230.222/32 34.162.244.71/32 34.162.191.81/32 34.162.86.102/32 136.79.143.251/32 136.83.20.215/32 34.162.111.78/32 34.162.90.102/32 34.162.27.34/32 34.152.124.140/32 34.153.21.190/32 34.186.252.4/32 34.162.153.71/32