A maioria dos donos de websites espera que os rastreadores encontrem o seu conteúdo. Publicam uma página à segunda-feira e esperam que um bot a descubra até quarta. Com os rastreadores de IA, essa espera pesa mais do que alguma vez pesou. O Perplexity rastreia a web várias vezes por dia. A atualidade não é um sinal de ranking menor. É a diferença entre o teu conteúdo ser citado ou ser citado o do teu concorrente.
Os sitemaps XML e o IndexNow são as duas ferramentas que invertem este modelo. Em vez de esperares passivamente, dizes aos rastreadores exatamente onde está o teu conteúdo e quando mudou. Os sitemaps organizam as tuas páginas para que os rastreadores as encontrem mais depressa. O IndexNow avisa ativamente os motores de pesquisa no momento em que algo é publicado. Juntas, estas ferramentas encurtam a janela de descoberta de dias para horas. Nas plataformas de IA, onde a atualidade pode decidir a visibilidade, essa vantagem de velocidade é real.
O que um sitemap XML faz pelos rastreadores de IA
Um sitemap XML é um ficheiro estruturado que lista todas as páginas importantes do teu website. Diz aos rastreadores o URL de cada página, quando foi atualizada pela última vez, que importância tem em relação às outras e com que frequência muda.
Para os motores de pesquisa tradicionais, os sitemaps são um extra desejável. Para os rastreadores de IA, são quase essenciais. A análise de registos de servidor em 85 domínios mostra que o GPTBot (o rastreador da OpenAI) consulta os sitemaps na fase inicial de descoberta 76% das vezes. Compara com o Googlebot, que só usa sitemaps 54% das vezes. Os sistemas de IA dependem mais dos sitemaps porque querem perceber depressa a estrutura do teu site e a prioridade do conteúdo.
A razão importa. O Perplexity rastreia constantemente. Precisa de encontrar conteúdo novo depressa. O ChatGPT indexa de forma seletiva. Dá prioridade às páginas que mais importam para ti. Se o teu sitemap estiver desorganizado ou incompleto, estás na prática a esconder conteúdo dos rastreadores que decidem se a tua marca é citada nas respostas.
Como os rastreadores de IA usam o teu sitemap de forma diferente
Um sitemap diz três coisas aos rastreadores. Diz onde está o teu conteúdo. Diz que páginas mais importam. E diz quando as coisas mudaram.
Para os sistemas de IA, esta terceira parte é crítica. Quando atualizas uma página, a tag lastmod (última modificação) do teu sitemap sinaliza que o conteúdo mudou. O GPTBot verifica esta tag. O Perplexity verifica esta tag. Quando um rastreador de IA vê uma atualização recente no teu sitemap, dá prioridade a voltar a rastrear essa página. Se o teu sitemap diz que uma página não muda há seis meses, o rastreador despriorizá-la. O viés de atualidade das plataformas de IA faz desta a metainformação mais importante que controlas.
A segunda parte também importa. O teu sitemap inclui uma tag priority que diz aos rastreadores que páginas são mais importantes para ti. As páginas recebem uma pontuação de prioridade de 0 a 1. A tua página inicial pode ser 1,0. O teu blogue pode ser 0,8. O conteúdo antigo arquivado pode ser 0,3. Os rastreadores de IA não tratam a prioridade como sinal de ranking, mas tratam-na como sinal de eficiência. Se disseres a um rastreador de IA que 60% do teu site tem baixa prioridade, ele sabe onde concentrar o orçamento de rastreio.
A otimização do sitemap a que os rastreadores de IA respondem
A maioria das empresas cria um sitemap e esquece-o. Os rastreadores encontram-no. O conteúdo é indexado. Assunto encerrado.
Os rastreadores de IA recompensam a especificidade. Os sitemaps segmentados têm um desempenho 67% melhor. Em vez de despejares todas as páginas num sitemap gigante, crias sitemaps separados para tipos de conteúdo diferentes. Um para artigos de blogue. Um para páginas de produto. Um para guias de aprendizagem. Um para as tuas páginas principais.
Porque é que isto importa? Quando um rastreador de IA visita o teu site, tem tempo e orçamento de rastreio limitados. Se lhe disseres que o teu sitemap tem 10.000 páginas misturadas e ele só tem tempo para rastrear 1.000, tem de adivinhar quais são as 1.000 que importam. Se, em vez disso, segmentares os sitemaps e lhe disseres que o sitemap do blogue tem 400 páginas e o dos produtos tem 50, o rastreador sabe exatamente como distribuir o orçamento. As páginas de produto recebem rastreios mais profundos. Os artigos de blogue recentes são rastreados várias vezes.
A melhoria vê-se na velocidade de descoberta. Os sitemaps segmentados conseguem uma descoberta do site completo 34% mais rápida pelos rastreadores de IA. Os sites com um sitemap gigante esperam 30 dias por uma cobertura de rastreio completa. Os sites com sitemaps segmentados veem a cobertura completa em 20 dias.
Segmentar é simples. Crias ficheiros de sitemap separados para as diferentes secções do teu site e depois listas todos num ficheiro de índice de sitemaps. A maioria dos sistemas de gestão de conteúdo, incluindo a WEMASY, gera sitemaps automaticamente. A maioria das plataformas também permite segmentá-los por tipo ou secção.
Acertar na tag lastmod
A tag lastmod é o teu sinal de atualidade para os rastreadores de IA. Quando publicas conteúdo novo, começa com a data de hoje. Quando atualizas um artigo antigo, atualizas a data lastmod. O rastreador vê isto e sabe que algo mudou.
Muitos sites erram aqui. Publicam uma página em janeiro e a data lastmod fica em janeiro para sempre. Atualizam a página em maio mas esquecem-se de atualizar o sitemap. O rastreador não vê mudança e despriorizá-la no novo rastreio.
Para as plataformas de IA, é um erro crítico. O Perplexity usa especificamente a atualidade do conteúdo para decidir se te cita. Uma página com uma tag lastmod desatualizada parece obsoleta. Uma página com uma tag lastmod atual parece recente. Se manténs o teu conteúdo e o atualizas com regularidade, garante que o teu sitemap o reflete.
A melhor abordagem é automatizar. Os plugins de CMS, as aplicações de loja e a maioria das plataformas de conteúdo modernas atualizam automaticamente a data lastmod sempre que fazes qualquer alteração a uma página. Configura uma vez e esquece. Os rastreadores veem sinais recentes de forma contínua.
O que o IndexNow faz e os sitemaps não conseguem
Um sitemap é passivo. Crias, publicas e depois esperas que os rastreadores o descubram. Os rastreadores visitam o teu sitemap segundo o calendário deles, não o teu. Se um bot visita uma vez por semana, o teu conteúdo novo espera uma semana para ser descoberto.
O IndexNow inverte isto. Em vez de esperares pelos rastreadores, notificas ativamente. No momento em que publicas uma página, o IndexNow envia um aviso aos motores de pesquisa a dizer "acabei de publicar isto". Vários motores de pesquisa fora do Google suportam o IndexNow. Submetes a um único endpoint de API e todos recebem a notificação.
O IndexNow é gratuito e de código aberto. Foi desenvolvido por empresas de motores de pesquisa especificamente para resolver o problema da descoberta lenta. Antes do IndexNow, os profissionais de SEO tinham de contar com backlinks ou com o rastreio orgânico para o conteúdo novo ser notado. Com o IndexNow, controlas o anúncio.
O impacto é imediato. Sem o IndexNow, uma página nova fica no teu servidor à espera. Com o IndexNow, a página é rastreada em horas, por vezes em minutos. Passas de uma janela de descoberta de dias para uma janela de horas.
Como o IndexNow funciona com o teu sitemap
O IndexNow e os sitemaps não são concorrentes. Funcionam em conjunto. O teu sitemap diz aos rastreadores a estrutura e a prioridade do teu conteúdo. O IndexNow diz aos rastreadores que algo mudou neste momento.
Este é o fluxo. Publicas uma página nova. O IndexNow envia automaticamente uma notificação aos motores de pesquisa com esse novo URL. O rastreador recebe a notificação e visita de imediato. Quando chega, lê o teu sitemap para perceber o contexto. É uma página prioritária ou de baixa prioridade? Foi atualizada desde o último rastreio? Faz parte de um cluster de conteúdo?
O sitemap dá contexto ao rastreador. O IndexNow dá-lhe velocidade. Sem sitemaps, o rastreador sabe que a página existe mas não sabe como a priorizar nem se deve rastrear páginas relacionadas. Com as duas ferramentas em conjunto, a descoberta torna-se rápida e inteligente.
Como configurar o IndexNow
O IndexNow exige três coisas. Uma chave de API que prova que és dono do domínio. Um ficheiro de verificação alojado no teu domínio que prova a titularidade. E um mecanismo de submissão para enviar URLs à API do IndexNow.
Se o teu CMS tem um plugin oficial do IndexNow, ele trata de tudo automaticamente. Ativa-o e ele gera a tua chave, cria o ficheiro de verificação e submete URLs sempre que publicas ou atualizas conteúdo. Sem configuração para além de clicar em instalar.
Se usas a WEMASY ou outra plataforma moderna, a maioria das plataformas de alojamento inclui integração com o IndexNow. Vê as tuas definições de publicação. Se estiver disponível, ativa.
Se geres o teu próprio servidor ou usas uma plataforma sem integração incorporada, podes submeter URLs manualmente através do site do IndexNow ou por chamadas diretas à API. A documentação do IndexNow explica as duas abordagens.
Que rastreadores suportam o IndexNow e porque importa
O IndexNow é suportado por vários motores de pesquisa, incluindo grandes plataformas de pesquisa fora do Google.
Eis a surpresa. O ChatGPT rastreia a par destas plataformas. Quando um desses motores rastreia, o GPTBot costuma vir com ele. Quando outro rastreia, a notificação pode acelerar a indexação para o Perplexity e outros sistemas de IA que dependem de infraestrutura de rastreio semelhante.
O Google não suporta oficialmente o IndexNow. É uma diferença que vale a pena perceber. O Google tem o seu próprio sistema de descoberta por rastreio. A Google Search Console tem um papel semelhante ao do IndexNow, especificamente para o Google. Mas para o resto do ecossistema de IA, o IndexNow é a forma de anunciares conteúdo novo.
Muitas equipas fazem submissões na Google Search Console e no IndexNow em conjunto. O Google é avisado pela Search Console. O ecossistema de IA mais vasto é avisado pelo IndexNow. Esta abordagem dupla encurta o tempo de descoberta em todas as plataformas.
A vantagem de descoberta quando estas ferramentas trabalham juntas
Sem nenhuma destas ferramentas, é isto que acontece. Publicas uma página à segunda-feira. Um rastreador visita o teu site nessa semana e descobre-a. Na sexta-feira, o rastreador já a processou. Na segunda seguinte, pode aparecer em alguns resultados. A descoberta completa em várias plataformas de IA demora semanas.
Só com um sitemap, a descoberta acelera. O rastreador ainda tem de encontrar o teu sitemap. Mas quando o faz, sabe onde procurar o teu conteúdo mais recente. Se o teu sitemap estiver otimizado, reduzes o tempo de descoberta de semanas para 5 a 7 dias.
Só com o IndexNow, uma página é anunciada de imediato. Mas sem o contexto do sitemap, o rastreador não sabe se esta página se liga a outro conteúdo relacionado. Rastreia o próprio URL mas pode falhar o cluster temático. A descoberta é rápida mas incompleta.
Com as duas ferramentas a trabalhar juntas, tens uma descoberta rápida e inteligente. O IndexNow anuncia a página de imediato. O rastreador rastreia-a em horas. O teu sitemap diz-lhe que isto faz parte de uma série de três artigos sobre o mesmo tema. O rastreador dá prioridade à série. Os três artigos são descobertos e indexados em 24 horas. O Perplexity repara no cluster recente. Quando alguém faz uma pergunta na área temática, o teu conteúdo está disponível para ser citado. Passaste de semanas para horas.
Perguntas frequentes
Preciso de um sitemap e do IndexNow, ou basta um?
Precisas dos dois. Os sitemaps dizem aos rastreadores a estrutura e a prioridade do teu conteúdo. O IndexNow diz-lhes que algo mudou neste momento. Um sitemap sem IndexNow significa descoberta lenta. O IndexNow sem sitemap significa descoberta rápida de páginas individuais mas sem contexto para o conteúdo relacionado. As duas ferramentas em conjunto dão-te velocidade e inteligência. Com o criador de websites da WEMASY, podes configurar isto diretamente no teu website.
O IndexNow funciona com rastreadores de IA como o GPTBot e o Perplexity?
O IndexNow é oficialmente suportado por vários motores de pesquisa fora do Google. O ChatGPT rastreia a par de um desses motores, por isso as notificações do IndexNow desencadeiam muitas vezes rastreios do GPTBot. O Perplexity rastreia a web diretamente e também responde a atualizações de sitemap. Por isso, embora o IndexNow não seja um produto oficial do Perplexity, acelera na mesma a descoberta, porque o Perplexity usa infraestrutura semelhante à de outras plataformas suportadas.
Com que frequência devo atualizar o meu sitemap se publico conteúdo constantemente?
Se publicas com frequência, automatiza as atualizações do sitemap. A maioria dos sistemas de gestão de conteúdo atualiza os sitemaps automaticamente sempre que publicas ou alteras uma página. A tag lastmod também é atualizada automaticamente. Não deves atualizar o ficheiro do sitemap à mão. Configura a automatização e deixa-a correr em segundo plano.
Devo criar um sitemap grande ou vários segmentados?
Os sitemaps segmentados têm um desempenho 67% melhor do que um ficheiro gigante. Se tens mais de 500 páginas, divide o sitemap em segmentos por tipo de conteúdo ou secção. Cria um para artigos de blogue, um para produtos, um para guias, e assim por diante. Depois lista todos os sitemaps de segmento num ficheiro de índice de sitemaps. Os rastreadores descobrem mais conteúdo mais depressa, porque lhes disseste exatamente onde procurar o que mais importa para ti.
E se uso a WEMASY ou outra plataforma que gera sitemaps automaticamente?
A maioria das plataformas modernas trata dos sitemaps e da integração com o IndexNow por ti. Vê as definições do teu site. Se a tua plataforma suporta o IndexNow, ativa-o. Se gera sitemaps automaticamente (como a maioria), verifica se as datas lastmod são atualizadas corretamente quando publicas ou editas conteúdo. Se a automatização está a funcionar, não tens mais nada a fazer.
Quanto tempo demora o conteúdo a aparecer nas respostas de IA depois de o submeter com o IndexNow?
A velocidade de descoberta varia. Alguns rastreadores de IA chegam ao teu conteúdo em minutos após uma submissão no IndexNow. Outros demoram até 24 horas. O Perplexity tende a ser o mais rápido. A aparição real nas respostas de IA depende de o teu conteúdo ser suficientemente bom para ser citado. O facto de um rastreador encontrar a tua página não significa que um motor de IA a vá usar. Uma descoberta mais rápida ajuda, mas o conteúdo de qualidade importa mais. Se a tua página responde diretamente à pergunta e tem dados recentes, tens hipóteses. Se for superficial ou vaga, a descoberta rápida não ajuda.