Bots de IA

GPTBot: qué es, sus rangos de IP y cómo bloquearlo

GPTBot es el crawler de OpenAI para Entrenamiento de IA.

Proveedor	OpenAI
Para qué sirve	Entrenamiento de IA
En su User-Agent	`GPTBot`
La lista de direcciones de su proveedor	`https://openai.com/gptbot.json`
Rangos de IP	18

Toma páginas para entrenar modelos de IA y no trae a nadie de vuelta a tu sitio. Bot Protection lo bloquea por defecto; puedes permitirlo.

Cómo verificarlo

Cualquier bot puede escribir GPTBot en su User-Agent. Una solicitud es de GPTBot solo cuando su dirección está en la lista publicada por OpenAI de abajo: verifica la dirección, no el nombre.

Verificar una dirección

Cómo bloquearlo

Con robots.txt, le pides que no entre:

User-agent: GPTBot
Disallow: /

robots.txt es una petición, no un bloqueo, y no distingue el crawler verdadero de un bot que usa su nombre. Bot Protection verifica GPTBot por su dirección en cada solicitud y le responde como elijas en la página Configuración, por tipo o solo para GPTBot; un bot que solo usa el nombre se juzga como cualquier otro bot.

Empezar la prueba gratis Todos los bots de IA

Sus rangos de IP

De la propia lista de OpenAI, descargada de nuevo cada día.

IPv4

132.196.86.0/24
172.182.202.0/25
172.182.207.0/25
20.125.66.80/28
20.171.206.0/24
20.171.207.0/24
4.227.36.0/25
52.230.152.0/24
74.7.175.128/25
74.7.227.0/25
74.7.227.128/25
74.7.228.0/25
74.7.230.0/25
74.7.241.0/25
74.7.241.128/25
74.7.242.0/25
74.7.243.128/25
74.7.244.0/25