Bots de IA
OAI-AdsBot: o que é, suas faixas de IP e como bloqueá-lo
OAI-AdsBot é o crawler da OpenAI para Busca e respostas com IA.
| Fornecedor | OpenAI |
|---|---|
| Para que serve | Busca e respostas com IA |
| No User-Agent | OAI-AdsBot |
| A lista de endereços do fornecedor | https://openai.com/adsbot.json |
| Faixas de IP | 2 |
Ele lê uma página para a busca de uma IA ou para uma pessoa que pediu a um assistente, e pode trazer visitantes. O Bot Protection o libera por padrão; você pode bloqueá-lo.
Como verificá-lo
Qualquer bot pode escrever OAI-AdsBot no User-Agent. Uma requisição é do OAI-AdsBot só quando o endereço está na lista publicada pela OpenAI abaixo: verifique o endereço, não o nome.
Como bloqueá-lo
Com o robots.txt, você pede que ele fique de fora:
User-agent: OAI-AdsBot Disallow: /
O robots.txt é um pedido, não um bloqueio, e não distingue o crawler verdadeiro de um bot que usa o nome dele. O Bot Protection verifica o OAI-AdsBot pelo endereço em cada requisição e responde como você escolher na página Configuração, por tipo ou só para o OAI-AdsBot; um bot que apenas usa o nome é julgado como qualquer outro bot.
Suas faixas de IP
Da própria lista da OpenAI, baixada de novo todo dia.
IPv4
130.131.229.128/25 20.168.90.128/25