NewNo plan feeNo plan fee. Just 2.9% + $0.30 per card sale, and signing up is free.Try now →

Comércio agêntico

Qual é a diferença entre GPTBot, OAI-SearchBot e ChatGPT-User?

Atualizado em

São três agentes da OpenAI com funções diferentes. O GPTBot coleta conteúdo para treinamento de modelos — bloqueá-lo não custa nada em classificações de busca ou visibilidade de respostas de IA. O OAI-SearchBot constrói o índice a partir do qual o ChatGPT responde — bloqueá-lo remove você das respostas de IA. O ChatGPT-User é uma busca em tempo real feita em nome de uma pessoa específica perguntando sobre você agora — bloqueá-lo afasta um cliente no meio de uma pergunta. Um lojista deve bloquear no máximo o primeiro.

Os nomes são o problema

Todos os três pertencem à OpenAI, todos os três aparecem em seus logs como tráfego da OpenAI, e seus nomes não dão quase nenhuma pista de qual é qual. Isso não é tanto uma crítica à nomenclatura, mas sim uma explicação de por que o erro mais caro nesta área é um acidente, e não uma decisão.

Uma regra escrita para "bloquear OpenAI" — o que é intuitivo de escrever — pega todos os três. A intenção geralmente é optar por não participar do treinamento de modelos. O efeito inclui optar por não participar dos resultados de busca do ChatGPT e recusar consultas de clientes em tempo real.

User-agentO que fazBloqueá-lo custa a você
GPTBotRastreia conteúdo para corpora de treinamento para modelos futurosNada em classificações ou visibilidade de respostas de IA. Uma escolha comercial legítima.
OAI-SearchBotConstrói o índice a partir do qual o ChatGPT responde às buscasSua presença nas respostas do ChatGPT. Este é o caro.
ChatGPT-UserBusca uma página em tempo real porque um usuário específico perguntou sobre elaUma pessoa real, no meio de uma pergunta, que estava sendo direcionada a você.
Os três agentes da OpenAI, o que cada um faz e o que bloqueá-lo custa

Por que bloquear o GPTBot é realmente gratuito

Isso surpreende as pessoas, então vale a pena ser explícito. Crawlers de treinamento não têm influência nas classificações do Google Search — o Google não usa o rastreamento da OpenAI — e não têm influência sobre se o ChatGPT o exibe na busca, porque isso vem de um índice diferente construído por um agente diferente.

O que você perde ao bloquear o GPTBot é mais difícil de medir: modelos futuros podem saber menos sobre sua marca por terem lido menos sobre ela. Se isso importa, depende se você prefere ser descrito a partir de suas próprias palavras ou de cobertura de terceiros. Ambos são defensáveis. Nenhum custa a você uma classificação.

Um robots.txt que reflete a intenção real

Se sua intenção é "não treinar com meu conteúdo, mas me exibir", as regras que a expressam nomeiam cada agente explicitamente, em vez de depender de um padrão.

  • Disallow GPTBot se você quiser optar por não participar do treinamento. Considere também CCBot, Bytespider, Google-Extended e Applebot-Extended, que são os crawlers de treinamento equivalentes de outros operadores.
  • Allow OAI-SearchBot, PerplexityBot, Claude-SearchBot e DuckAssistBot. Estes são os motores de resposta.
  • Allow ChatGPT-User e Perplexity-User. Estas são buscas em tempo real em nome de uma pessoa.
  • Não confie em uma regra curinga para expressar nada disso. Um disallow `User-agent: *` que você pretendia para scrapers se aplicará a todos os itens acima.
  • Fique atento a linhas consecutivas de User-agent. Vários agentes listados juntos antes de um Disallow compartilham essa regra — que é como GPTBot e OAI-SearchBot acabam bloqueados por uma linha que alguém escreveu para um deles.

Verifique a CDN, não apenas o arquivo

A regra que você pode ler raramente é onde o bloqueio reside. Quando verificamos trinta marcas DTC conhecidas, nenhuma bloqueou motores de resposta em robots.txt — mas quatro recusaram um crawler identificado diretamente com um 403 ou 429, e três falharam completamente na conexão.

Essa decisão reside em um conjunto de regras de gerenciamento de bots na CDN ou WAF, geralmente adicionado por alguém que protege a origem de scrapers muito antes de o tráfego de referência de IA ser uma consideração. Não aparece em nenhuma auditoria de robots.txt, e a pessoa que notaria o tráfego ausente não tem visibilidade do console onde foi configurado.

A pergunta que vale a pena fazer a quem administra sua edge é específica e tem uma resposta definitiva: OAI-SearchBot, PerplexityBot e ChatGPT-User estão na allowlist?

Perguntas frequentes

Bloquear o GPTBot prejudica meu SEO?
Não. O GPTBot é um crawler de treinamento de modelos e não tem efeito nas classificações do Google Search ou sobre se o ChatGPT o exibe nos resultados de busca. Esses vêm do Googlebot e do OAI-SearchBot, respectivamente — agentes completamente diferentes.
Se eu bloquear o GPTBot, o ChatGPT ainda encontrará meus produtos?
Sim, desde que OAI-SearchBot e ChatGPT-User sejam permitidos. A busca do ChatGPT é construída a partir de um índice separado e buscas em tempo real, nenhum dos quais depende de rastreamentos de treinamento.
Qual aparece quando alguém pergunta ao ChatGPT sobre minha marca?
Geralmente ChatGPT-User, buscando sua página em tempo real para aquela pergunta específica, e OAI-SearchBot para o que já estava indexado. Se você vir ChatGPT-User em seus logs, uma pessoa real está perguntando sobre você naquele momento.
Existe uma divisão equivalente para outras empresas de IA?
Sim, e segue o mesmo padrão. A Anthropic usa o ClaudeBot para treinamento e o Claude-SearchBot para busca; a Perplexity usa o PerplexityBot para indexação e o Perplexity-User para buscas em tempo real; o Google separa o Google-Extended (treinamento) do Googlebot comum. O padrão é consistente o suficiente para criar uma política.

Fontes

Relacionado