Bot IA
GPTBot: cos'è, i suoi intervalli IP e come bloccarlo
GPTBot è il crawler di OpenAI per Addestramento IA.
| Fornitore | OpenAI |
|---|---|
| A cosa serve | Addestramento IA |
| Nel suo User-Agent | GPTBot |
| L'elenco di indirizzi del fornitore | https://openai.com/gptbot.json |
| Intervalli IP | 18 |
Prende pagine per addestrare modelli IA e non riporta nessuno sul tuo sito. Bot Protection lo blocca per impostazione predefinita; puoi lasciarlo passare.
Come verificarlo
Qualsiasi bot può scrivere GPTBot nel suo User-Agent. Una richiesta è di GPTBot solo quando il suo indirizzo è nell'elenco pubblicato da OpenAI qui sotto: verifica l'indirizzo, non il nome.
Come bloccarlo
Con robots.txt, gli chiedi di restare fuori:
User-agent: GPTBot Disallow: /
robots.txt è una richiesta, non un blocco, e non distingue il crawler vero da un bot che ne usa il nome. Bot Protection verifica GPTBot dal suo indirizzo a ogni richiesta e gli risponde come scegli nella pagina Configurazione, per tipo o solo per GPTBot; un bot che ne usa soltanto il nome è giudicato come qualsiasi altro bot.
I suoi intervalli IP
Dall'elenco di OpenAI, scaricato di nuovo ogni giorno.
IPv4
132.196.86.0/24 172.182.202.0/25 172.182.207.0/25 20.125.66.80/28 20.171.206.0/24 20.171.207.0/24 4.227.36.0/25 52.230.152.0/24 74.7.175.128/25 74.7.227.0/25 74.7.227.128/25 74.7.228.0/25 74.7.230.0/25 74.7.241.0/25 74.7.241.128/25 74.7.242.0/25 74.7.243.128/25 74.7.244.0/25