Bot IA
Google-Agent: cos'è, i suoi intervalli IP e come bloccarlo
Google-Agent è il crawler di Google per Ricerca e risposte IA.
| Fornitore | |
|---|---|
| A cosa serve | Ricerca e risposte IA |
| Nel suo User-Agent | Google-Agent |
| L'elenco di indirizzi del fornitore | https://developers.google.com/static/crawling/ipranges/user-triggered-agents.json |
| Intervalli IP | 20 |
Legge una pagina per la ricerca di un'IA o per una persona che l'ha chiesta a un assistente, e può portare visitatori. Bot Protection lo lascia passare per impostazione predefinita; puoi bloccarlo.
Come verificarlo
Qualsiasi bot può scrivere Google-Agent nel suo User-Agent. Una richiesta è di Google-Agent solo quando il suo indirizzo è nell'elenco pubblicato da Google qui sotto: verifica l'indirizzo, non il nome.
Come bloccarlo
Con robots.txt, gli chiedi di restare fuori:
User-agent: Google-Agent Disallow: /
robots.txt è una richiesta, non un blocco, e non distingue il crawler vero da un bot che ne usa il nome. Bot Protection verifica Google-Agent dal suo indirizzo a ogni richiesta e gli risponde come scegli nella pagina Configurazione, per tipo o solo per Google-Agent; un bot che ne usa soltanto il nome è giudicato come qualsiasi altro bot.
I suoi intervalli IP
Dall'elenco di Google, scaricato di nuovo ogni giorno.
IPv4
136.121.16.0/24 136.121.24.0/21 136.121.40.0/21 136.122.0.0/16 74.125.232.0/28 74.125.232.112/28 74.125.232.16/28 74.125.232.32/28 74.125.232.48/28 74.125.232.64/28 74.125.232.80/28 74.125.232.96/28
IPv6
2001:4860:c::/124 2001:4860:c::10/124 2001:4860:c::20/124 2001:4860:c::30/124 2001:4860:c::40/124 2001:4860:c::50/124 2001:4860:c::60/124 2001:4860:c::70/124