Analytics de Agentes

Quando um usuário faz uma pergunta a um mecanismo de resposta, o mecanismo precisa encontrar informações para construir sua resposta. Ele envia bots especializados, conhecidos como rastreadores de IA, para ler páginas da web. Estes incluem o GPTBot para o ChatGPT, o ClaudeBot para o Claude, o PerplexityBot e o Google-Extended para os modelos de IA do Google.

O arquivo robots.txt do seu site é o primeiro guardião. Ele informa a esses bots quais partes do seu site eles têm permissão para visitar. Uma verificação de robots.txt para rastreadores de IA é o processo de auditar esse arquivo para ver quais bots você está recebendo e quais está bloqueando. É uma peça fundamental do SEO técnico para a busca por IA. Se suas páginas-chave estiverem bloqueadas, elas não poderão ser lidas e não aparecerão como citações nas respostas de IA.

O SEO tradicional focava em ranquear em uma lista de dez links azuis. A pesquisa por IA, ou otimização para motores de resposta, é diferente. O objetivo é ser uma das poucas fontes citadas em um único parágrafo gerado. Os motores são seletivos e só citam páginas que seus rastreadores tiveram permissão para ler.

Permitir os rastreadores de IA é o primeiro passo, não negociável. Se o GPTBot não puder acessar seu blog, o ChatGPT não poderá aprender com ele. Se o Google-Extended estiver bloqueado, seu conteúdo será invisível para o Google AI Overviews. Essa verificação não é sobre volume de tráfego, é sobre elegibilidade. Você está verificando seu ingresso para a arena onde as respostas de IA são escritas.

A Análise de Agentes, disponível em /dashboard/crawlers, fornece um relatório técnico focado na pesquisa por IA. Ela funciona analisando o seu site externamente, da mesma forma que um bot de IA faria. Ela verifica o seu arquivo robots.txt e qualquer arquivo llms.txt que você tenha configurado, e então reporta o que encontra.

A tela está organizada em três áreas. A visibilidade para crawlers de IA mostra uma lista de bots de IA conhecidos, como o GPTBot e o ClaudeBot, e indica claramente se as suas regras atuais permitem ou bloqueiam o acesso deles. A rastreabilidade executa uma busca simulada das suas páginas, reportando tempos de resposta, recursos bloqueados e como a página é renderizada sem JavaScript, destacando problemas que podem tornar o seu conteúdo ilegível. O acompanhamento de desempenho do conteúdo mostra quais das suas páginas estão sendo indexadas por serviços relevantes para IA e coleta dados sobre o texto âncora que aponta para o seu site em toda a web.

Para um profissional de marketing, esta é uma ferramenta de diagnóstico e monitoramento. Um fluxo de trabalho típico começa com uma auditoria. Abra o Agent Analytics e revise a lista de visibilidade do rastreador de IA. Para um site de lançamento de um novo produto, você verificaria se todos os principais bots têm acesso às suas páginas de destino e documentação mais importantes.

Em seguida, use o relatório de rastreabilidade. Filtre para uma página de alta prioridade, como a descrição do seu serviço principal. Procure por avisos sobre arquivos CSS ou JavaScript bloqueados que possam impedir a renderização correta da página para um bot. Corrija esses problemas no seu código. Por fim, verifique o desempenho do conteúdo semanalmente. Procure por novas páginas que entraram na lista 'indexada', indicando que agora estão sendo captadas pelos serviços de IA, e revise o relatório de texto âncora para ver como outros sites estão descrevendo sua marca quando criam links para você.

Um status 'Permitido' em verde para o GPTBot significa que seu robots.txt o autoriza. Isso não significa que o GPTBot tenha visitado ou que seu conteúdo será citado. Significa apenas que a porta está aberta. Um tempo de resposta lento no relatório de rastreabilidade é um problema direto, pois os bots têm limites de tempo e podem abandonar páginas lentas.

A métrica de 'cobertura indexada' mostra quais páginas os sistemas conhecem. Um aumento aqui é um sinal positivo de visibilidade crescente na IA. O relatório de texto âncora é útil para entender a percepção da marca. Uma mudança de 'ferramenta de software' para 'plataforma de marketing de IA' em como outros criam links para você reflete uma narrativa de mercado em transformação. Lembre-se, estes são indicadores antecedentes, não promessas de tráfego ou citações.

É importante declarar as limitações com clareza. O Agent Analytics lê o seu site a partir da internet pública. Ele não ingere os logs do seu servidor. A ingestão de logs de servidor mostraria exatamente quais bots o visitaram, com que frequência e o que eles buscaram. Esse nível de detalhe não está implementado.

O recurso também não pode comparar o desempenho do seu site com o de outros. Para afirmar que a sua rastreabilidade está no percentil 80, é necessária uma grande população de sites comparáveis para medir. Nós não temos essa população e preferimos não mostrar nada a fornecer um percentil enganoso baseado em uma amostra de um.

O Agent Analytics faz parte do grupo Operate no Mentionry. Você pode acessá-lo durante o teste gratuito de sete dias, que permite testá-lo no seu próprio site com 50 prompts por dia enviados ao ChatGPT, Gemini e Google AI Overviews. O teste não requer cartão de crédito e termina automaticamente.

O plano Starter, a US$ 99 por mês, inclui acesso completo ao Agent Analytics, juntamente com 50 prompts rastreados, leituras diárias em três mecanismos de resposta e 100 execuções de agentes por mês. Para equipes maiores que precisam de mais marcas, mecanismos e assentos, o plano Enterprise é cotado individualmente e inclui recursos como acesso à API e Single Sign-On.