Publishers e bibliotecas de conteúdo
Veja se famílias verificadas de crawlers de busca e IA solicitam o site e se caminhos importantes retornam respostas não 2xx.
Análise de tráfego de IA e bots
Conecte a zona Cloudflare associada ao seu projeto Screpy e veja a atividade verificada dos últimos sete dias. Compare categorias de crawlers, publishers, dados transferidos, tendências de solicitações, respostas bem-sucedidas e URLs não 2xx sem confundir uma visita de crawler com uma citação de IA.
Conecte a análise de bots do Cloudflare
Conecte o Cloudflare para consultar solicitações de bots verificados na zona associada ao projeto Screpy. Confira a conexão e o escopo antes de interpretar uma tabela vazia.
- Use um token de API ativo com acesso à zona relevante e aos seus dados de análise.
- O Screpy associa o domínio do projeto a uma zona acessível; um subdomínio pode corresponder à zona do domínio principal.
- O tráfego cobre essa zona Cloudflare e pode incluir outros nomes de host da zona, além do host do projeto.
- Permissões ausentes, falta de zona correspondente ou dados de sete dias indisponíveis geram um estado indisponível, não a prova de zero solicitações de bots.
Origem
Screpy
Screpyexample.comConectado
Identifique crawlers de IA verificados
Encontre as famílias de crawlers de busca e IA presentes nos dados conectados. Nomes e informações do editor ajudam a distinguir quem enviou solicitações antes de investigar volume ou respostas.
- Confira famílias conhecidas como Googlebot, Bingbot e crawlers de IA compatíveis quando suas solicitações estiverem presentes.
- A tabela parte do tráfego classificado pelo Cloudflare como bots verificados; o nome de um crawler, sozinho, não verifica cada solicitação automatizada.
- Quando as solicitações de um crawler abrangem várias categorias, sua linha mostra a categoria com maior volume.
- Filtre a tabela por uma categoria disponível; essa seleção não filtra o gráfico de tráfego separado.
Solicitações
42- Googlebot18
- GPTBot14
- ClaudeBot10
Compare a atividade horária de bots
Identifique concentrações de solicitações no gráfico de categorias e examine os minigráficos dos crawlers nos mesmos sete dias. A visão atual usa um período fixo, sem seleção personalizada de datas.
- O período cobre sete dias de intervalos horários completos e termina no início de uma hora UTC.
- A hora atual incompleta fica excluída; o gráfico não é um fluxo em tempo real de cada nova solicitação.
- As cinco categorias verificadas com maior volume aparecem separadamente; as demais são agrupadas em Outros.
- O minigráfico do crawler mostra a distribuição de suas solicitações e ajuda a distinguir uma concentração breve de atividade contínua.
Solicitações
1.860Meça solicitações e dados transferidos
Leia os totais de solicitações junto com os bytes transferidos. Eles descrevem volume de tráfego e tamanho das respostas, não pessoas únicas, popularidade de respostas de IA ou valor do conteúdo.
- O total inclui solicitações repetidas; não representa visitantes únicos nem sessões.
- Os bytes somam respostas servidas pelo Cloudflare, incluindo respostas não 2xx; não medem a leitura bem-sucedida do conteúdo.
- Compare volume, tendência e resultados do crawler antes de investigar um pico; esses números não calculam custos de hospedagem nem treinamento de modelos.
- Solicitações
- 1.860
- Transferência de dados
- 24 MB
Entenda respostas HTTP aos crawlers
Separe a classificação de respostas de um diagnóstico. A coluna de solicitações malsucedidas inclui toda resposta não 2xx; um total alto, sozinho, não significa que o site está com defeito.
- Respostas HTTP 2xx contam como bem-sucedidas; todos os demais status entram no total de solicitações malsucedidas.
- Um redirecionamento 3xx pode ser intencional. Confira o destino antes de tratá-lo como problema de rastreamento.
- Um 403 pode refletir uma restrição de acesso desejada; a solicitação não prova que o crawler baixou o conteúdo da página.
- Investigue respostas 404 ou 5xx inesperadas com a rota real e a configuração do site antes de decidir o que alterar.
Estado HTTP
200GET /HTTP/2 200Investigue caminhos de crawler não 2xx
Abra o total não 2xx de um crawler para ver onde suas solicitações receberam essas respostas. Caminho, status e frequência oferecem uma investigação concreta às equipes técnicas ou de SEO.
- O detalhamento abrange o crawler selecionado e o mesmo período fixo de sete dias.
- As linhas agrupam caminho solicitado, status HTTP e contagem; um caminho pode aparecer com diferentes status.
- As maiores contagens aparecem primeiro, com paginação das linhas disponíveis. É uma visão agregada, não um registro de solicitações individuais.
- Registre crawler, caminho, status e quantidade, confira se a resposta é intencional e revise a atividade posterior após uma correção verificada.
SelecionadoGPTBot
| Caminho da URL | Estado HTTP | Solicitações |
|---|---|---|
/guides/seo | 404 | 128 |
/guides/seo | 301 | 36 |
/setup | 503 | 12 |
Converse sobre Tráfego de bots de IA. Com SEO MCP.
Consulte Quick Wins baseados em sinais disponíveis de busca, rastreamento e tráfego do Cloudflare conectado via SEO MCP. O acesso cobre essas oportunidades, não todo o painel de análise ou tráfego de bots.
- Screpy: Olá! Vamos analisar Tráfego de bots de IA para example.com. O que você quer saber?
- Você: Quais Quick Wins baseados em tráfego devo revisar para example.com?
- Screpy: Revise oportunidades de busca e sinais de tráfego do mesmo projeto. As oportunidades do Cloudflare exigem uma zona conectada e dados disponíveis; registros completos de análise e tráfego de bots não estão expostos via MCP. Contexto dos Quick Wins: Oportunidades de busca: Dados disponíveis do projeto. Sinais do Cloudflare: Conexão necessária.
- Você: Transforme isso em um breve plano de ação.
- Screpy: Vou separar os resultados das recomendações. Revise as evidências, escolha uma mudança e confira os resultados depois. Seus próximos passos: Revise: Confira a fonte e a data de cada resultado.. Decida: Escolha a primeira mudança.. Verifique: Compare os resultados após a mudança..
- Você: Você pode explicar as evidências em linguagem simples?
- Screpy: Sim. Pergunte sobre um resultado compatível e explicarei o que mostra, de onde vem e o que continua incerto. Dados ausentes continuam indisponíveis; recomendações não são correções automáticas.
Transforme tráfego de bots verificados em uma revisão técnica focada.
Comece pelas categorias mais ativas, selecione um crawler e inspecione caminhos não 2xx recorrentes. Confira a resposta esperada antes de encaminhar um problema específico de rota ou acesso à equipe responsável.
-
Conecte o Cloudflare e associe a zona do projeto
Use um token de API ativo que possa listar a zona do site e ler análises; confirme que o domínio do projeto tem uma zona conectada correspondente.
-
Leia o padrão de categorias de sete dias
Procure atividade contínua, picos repentinos, categorias esperadas ausentes ou um segmento Outros grande antes de abrir linhas individuais.
-
Compare volume e resultados dos crawlers
Use solicitações, bytes transferidos, tendência horária, respostas 2xx bem-sucedidas e contagens não 2xx para escolher o crawler que precisa de atenção primeiro.
-
Inspecione caminhos e confirme a resposta esperada
Revise cada caminho e status repetidos, confirme se são intencionais, investigue respostas inesperadas e use evidências posteriores para confirmar a mudança.
Use tráfego de crawlers quando ele mudar uma decisão real.
A visão é mais útil quando a equipe conhece o contexto do site e consegue decidir se um padrão de tráfego ou uma resposta HTTP é esperado.
Equipes de SEO e conteúdo
Adicione evidência real de solicitações às discussões de rastreabilidade sem apresentar atividade de crawler como prova de indexação, citações ou visibilidade.
Equipes de produto e engenharia
Encaminhe crawler, caminho, status HTTP e contagem quando uma rota ou implantação precisar de investigação técnica.
Agências e equipes com vários projetos
Mantenha cada zona de cliente ou site conectada ao projeto Screpy correspondente e use o mesmo método em propriedades separadas.
Saiba o que o tráfego de crawlers não pode comprovar.
Limites claros tornam as evidências mais seguras em discussões de SEO, conteúdo, engenharia e busca com IA.
Uma solicitação não é uma citação de IA
Uma solicitação de crawler verificado registra uma tentativa de acesso e sua resposta. Até solicitações bloqueadas podem aparecer; o registro não prova download do conteúdo, indexação, treinamento, citação ou inclusão em resposta de IA.
Sete dias, não histórico personalizado
A visão atual usa período fixo de sete dias com tendência horária. Não promete intervalos arbitrários nem histórico de bots de longo prazo.
Tráfego verificado, não toda solicitação automatizada
A visão usa categorias de bots verificadas disponíveis na zona conectada. Não é um explorador de logs brutos nem um inventário de todos os scrapers.
Análise, não controle de crawlers
O Screpy informa atividade e resultados. A visão não bloqueia crawlers, altera regras de acesso, envia alertas de bots nem exporta um log completo.
Escolha o fluxo de busca com IA adequado à pergunta.
Use análise de crawlers para solicitações do site, AI Visibility para respostas monitoradas ou Website Audit quando um problema repetido exigir investigação técnica mais ampla.
Revise sete dias de categorias verificadas, tendências de solicitações, volume transferido, resultados e caminhos não 2xx.
Monitore prompts selecionados para menções à marca, citações, domínios de origem, posição da resposta, sentimento, concorrentes e share of voice.
Rastreie o site quando solicitações de bots não 2xx apontarem para redirecionamentos, destinos quebrados, problemas de links internos ou falhas recorrentes de template.
Perguntas sobre análise de tráfego de bots de IA, respondidas.
Entenda a fonte conectada, o período fixo, o escopo dos crawlers verificados, a lógica de respostas, o detalhamento de URLs e a diferença entre acesso de crawler e visibilidade em respostas de IA.
O que o Screpy AI & Bot Traffic mede?
O Screpy usa análises da zona Cloudflare associada a um projeto para informar o tráfego de bots verificado dos últimos sete dias. O painel inclui tendência horária por categoria e tabela com publisher, categoria, bytes transferidos, solicitações totais, bem-sucedidas, não 2xx e tendência por crawler.
Como investigar URLs malsucedidas de crawlers?
Abra a contagem não 2xx do crawler afetado, revise cada caminho e status HTTP e decida se a resposta é intencional. Compare redirecionamentos inesperados, respostas 4xx ou 5xx com rota real, links internos, destino canônico, configuração de crawling e uma auditoria do site antes de alterar algo.
O que conta como solicitação bem-sucedida ou malsucedida?
O Screpy conta respostas HTTP 2xx como bem-sucedidas. Respostas fora de 2xx são malsucedidas nesta visão, portanto o detalhamento pode incluir redirecionamentos e erros de cliente ou servidor. Confira o status exato antes de corrigir.
O Screpy pode bloquear crawlers de IA ou alterar robots.txt nesta página?
Não. O recurso é de análise e investigação. Controles de acesso, regras de firewall, diretivas robots, alertas, análise de referência e exportações CSV não são gerenciados nesta página.
Quais crawlers o Screpy consegue identificar?
A tabela começa com tráfego classificado como bots verificados pela fonte conectada. O Screpy adiciona identidades legíveis para famílias conhecidas como Googlebot, Bingbot, OpenAI, Anthropic, Perplexity, Apple, Meta e outros serviços reconhecidos quando suas solicitações estão presentes. As linhas dependem do tráfego real da zona.
O que é necessário antes de os dados de bots aparecerem?
Conecte um token API ativo do Cloudflare que possa listar a zona e ler suas análises. O Screpy associa domínios do projeto a zonas acessíveis. Se faltarem permissões, não houver correspondência ou o dataset não estiver disponível, o painel mostra indisponível em vez de dados substitutos.
O Screpy AI & Bot Traffic é um analisador de logs do servidor?
Não. O Screpy lê a análise agregada disponível da zona Cloudflare associada; não importa logs brutos do servidor nem mostra cada evento de solicitação. Categorias, totais por crawler e detalhes dos caminhos usam agrupamentos e limites da fonte diferentes; não são um registro completo nem precisam corresponder exatamente. Dados ausentes são mostrados como indisponíveis.
O tráfego de bots de IA prova que meu conteúdo apareceu em uma resposta de IA?
Não. A análise registra a solicitação e a resposta de um crawler verificado no período. Solicitações bloqueadas podem estar incluídas, portanto o registro nem comprova que o crawler baixou o conteúdo. Não estabelece indexação, treinamento de modelo, menção à marca, citação ou inclusão em resposta. Use Visibilidade em IA para examinar prompts monitorados e respostas salvas.