A premissa de que “o Google renderiza JavaScript” tem sido, por anos, um pilar de tranquilidade para desenvolvedores e estrategistas de SEO que adotam frameworks modernos. A confiança aumentou em 2019, quando o Googlebot passou a rodar sobre a versão mais recente do Chromium. Contudo, um experimento rigoroso de 41 dias, detalhado em uma reportagem do Search Engine Land, expõe a perigosa incompletude dessa premissa na era da inteligência artificial generativa.
O estudo revela que, com a exceção parcial do Google, os robôs de rastreamento (crawlers) que alimentam os principais modelos de IA — como os da OpenAI, Anthropic, Meta e Perplexity — são essencialmente cegos a links de navegação que dependem de execução de JavaScript. Isso significa que seções inteiras de um site podem ser invisíveis para a nova geração de ferramentas de busca, um risco existencial para a visibilidade digital que o mercado mal começou a precificar.
O mito do crawler onipotente
Para testar a hipótese, o pesquisador montou um experimento controlado em um site de diretório com cerca de 2.400 páginas. A arquitetura foi dividida em duas: uma metade com links internos codificados diretamente em HTML, e a outra com links injetados via JavaScript após o carregamento da página. Para garantir a pureza dos dados, caminhos alternativos de descoberta, como sitemaps e breadcrumbs, foram desativados. A única forma de um crawler alcançar uma página no grupo JavaScript era executando o código da página-mãe.
Os resultados foram mais drásticos do que o esperado. Crawlers como GPTBot (OpenAI), ClaudeBot (Anthropic), Bingbot (Microsoft), Meta-ExternalAgent (Meta) e Amazonbot (Amazon) varreram profundamente as seções com HTML, mas pararam abruptamente na fronteira do JavaScript. Nenhum deles descobriu uma única página que exigisse a renderização de scripts. Apenas os crawlers do Google o fizeram, mas a nuance é crucial. O GoogleOther, um agente secundário, encontrou 48% das páginas dependentes de JS. Já o Googlebot, o crawler que efetivamente constrói o índice de busca, alcançou apenas 2% delas. A lição é dupla: para o ecossistema de IA, a invisibilidade é total; para o próprio Google, a visibilidade é dramaticamente reduzida.
A recuperação desigual e a lição estratégica
Após 27 dias, o experimento entrou na segunda fase: todos os links em JavaScript foram convertidos para HTML puro. A reação de parte dos crawlers foi quase imediata. Em 48 horas, o GPTBot mapeou todas as 250 páginas que antes ignorava. O Bingbot fez o mesmo em seguida. Isso prova que o problema não está no conteúdo das páginas, mas unicamente no mecanismo de descoberta — o link.
No entanto, a recuperação não foi universal. O ClaudeBot, por exemplo, continuou a visitar o site, mas apenas as páginas que já conhecia, ignorando os novos caminhos abertos. A surpresa, porém, veio do Google. Seu retorno às seções recém-convertidas foi notavelmente lento. Até o 41º dia do estudo, o Googlebot havia visitado apenas uma nova página, e o GoogleOther, nenhuma. A leitura aqui é que o orçamento de rastreamento, especialmente para um domínio novo, é um recurso finito e concentrado no início. Uma “primeira impressão” ruim, com uma arquitetura de difícil navegação, pode ter consequências duradouras, mesmo após a correção. O custo de consertar depois é maior do que o de construir corretamente desde o início.
A questão para empresas e publicações digitais deixa de ser apenas se o Google consegue indexar seu conteúdo. O paradigma se expandiu: a OpenAI, a Anthropic e a Perplexity conseguem? A dependência de frameworks JavaScript que renderizam do lado do cliente (client-side) para elementos de navegação críticos pode estar criando uma web de duas camadas. Uma, visível para todos. Outra, acessível apenas — e parcialmente — pelo incumbente, enquanto permanece oculta para os novos portais de descoberta de informação. A decisão de onde renderizar um link não é mais um mero detalhe técnico de SEO; tornou-se uma escolha estratégica fundamental sobre a relevância de um negócio no futuro próximo.
Com reportagem de Brazil Valley
Source · Search Engine Land
