AI-bots
Google-Agent: wat het is, de IP-bereiken en hoe u het blokkeert
Google-Agent is de crawler van Google voor AI-zoeken en -antwoorden.
| Leverancier | |
|---|---|
| Waarvoor hij dient | AI-zoeken en -antwoorden |
| In zijn User-Agent | Google-Agent |
| De adreslijst van de leverancier | https://developers.google.com/static/crawling/ipranges/user-triggered-agents.json |
| IP-bereiken | 20 |
Hij leest een pagina voor de zoekopdracht van een AI of voor iemand die het een assistent vroeg, en kan bezoekers brengen. Bot Protection laat hem standaard door; u kunt hem blokkeren.
Hoe u hem verifieert
Elke bot kan Google-Agent in zijn User-Agent schrijven. Een verzoek is alleen Google-Agent als het adres in de hieronder gepubliceerde lijst van Google staat: controleer het adres, niet de naam.
Hoe u hem blokkeert
Met robots.txt vraagt u hem weg te blijven:
User-agent: Google-Agent Disallow: /
robots.txt is een verzoek, geen blokkade, en kan de echte crawler niet onderscheiden van een bot die zijn naam draagt. Bot Protection verifieert Google-Agent bij elk verzoek aan zijn adres en antwoordt zoals u kiest op de pagina Set-up, per soort of alleen voor Google-Agent; een bot die alleen de naam draagt, wordt beoordeeld als elke andere bot.
De IP-bereiken
Uit de eigen lijst van Google, elke dag opnieuw gedownload.
IPv4
136.121.16.0/24 136.121.24.0/21 136.121.40.0/21 136.122.0.0/16 74.125.232.0/28 74.125.232.112/28 74.125.232.16/28 74.125.232.32/28 74.125.232.48/28 74.125.232.64/28 74.125.232.80/28 74.125.232.96/28
IPv6
2001:4860:c::/124 2001:4860:c::10/124 2001:4860:c::20/124 2001:4860:c::30/124 2001:4860:c::40/124 2001:4860:c::50/124 2001:4860:c::60/124 2001:4860:c::70/124