O teu tráfego duplica de repente. Parece ótimo. Depois percebes que o pico veio de um único país que não serves, a visitar a mesma página vezes sem conta. Bots.
O tráfego de bots é invisível por defeito. Chega aos relatórios de análise com ar de visitantes reais. Infla as tuas métricas, corrompe as tuas taxas de conversão e torna impossível ver o que está realmente a funcionar.
O que conta como tráfego de bots
Nem todo o tráfego não humano é mau. Os motores de pesquisa que rastreiam o teu site são bots. Os rastreadores de links das redes sociais também. São bots legítimos que queres nos teus dados.
Os bots de spam são diferentes. São visitas automáticas feitas para inflacionar métricas de tráfego, manipular a análise ou rastrear o teu site para copiar conteúdo. Distorcem os teus dados e desperdiçam os teus recursos.
Bots legítimos
Motores de pesquisa (Google e outros). Rastreadores de redes sociais (como o do Facebook). Bots de monitorização e de verificação de disponibilidade. Estes bots têm uma função e normalmente devem ser incluídos na tua análise, embora algumas equipas os excluam para se concentrarem no comportamento humano.
Bots de spam
Bots de spam de referência que geram tráfego de referência falso. Bots de fraude de cliques que simulam conversões. Bots de extração que recolhem o teu conteúdo. Bots de força bruta que procuram vulnerabilidades. Não têm nenhuma finalidade legítima e distorcem os teus dados.
Bots legítimos mas suspeitos
Alguns bots operam numa zona cinzenta. IPs de centros de dados que fazem ping ao teu site. Rastreadores de afiliados que parecem utilizadores. Bots de verificação de anúncios que clicam nos anúncios para confirmar que funcionam. São tecnicamente legítimos, mas podem distorcer as tuas métricas consoante os teus objetivos.
Como os bots distorcem a tua análise
Números de tráfego inflacionados
Os bots aumentam o teu número de visualizações de página. Pensas que o teu site recebe 1.000 visitantes por dia, mas 300 são bots. O teu tráfego humano real é de apenas 700. Tomas decisões com base em números inflacionados.
Taxas de conversão distorcidas
Alguns bots disparam eventos de conversão. Clicam em botões. Enviam formulários. O teu número de conversões parece melhor do que é. A tua taxa de conversão parece mais alta do que realmente é.
Origens de tráfego deturpadas
Os bots de spam de referência fazem parecer que o tráfego veio de sites que nunca te enviaram ninguém. O teu relatório de tráfego de referência fica poluído com origens falsas. Podes acabar por criar parcerias com origens que não são reais.
Atribuição quebrada
Os bots criam sessões que estragam o teu modelo de atribuição. Clicam em anúncios, saem e voltam. O teu modelo de atribuição credita-lhes conversões que não causaram. As origens reais são culpadas por problemas causados por bots.
Como identificar tráfego de bots
Procura padrões de tráfego que não correspondem ao comportamento humano
Os bots têm padrões previsíveis. Exatamente o mesmo número de visualizações de página por sessão. Nenhuma variação no scroll da página ou no tempo no site. Tráfego de países que não correspondem ao teu negócio. Várias conversões em segundos. Estes padrões indicam tráfego não humano.
Usa a filtragem de bots da tua ferramenta de análise
A maioria das ferramentas de análise tem deteção de bots integrada. O Google Analytics tem uma opção para excluir bots conhecidos. Filtra com base na lista de bots conhecidos do Interactive Advertising Bureau. Ativa isto primeiro, porque apanha os bots óbvios sem falsos positivos.
Cria filtros personalizados para padrões de spam
Alguns bots de spam passam pelos filtros normais. Procura padrões nos teus dados: muito tráfego de um único IP, tráfego de intervalos de IPs de centros de dados conhecidos, sessões com tempo de rejeição zero, conversões de bots claramente identificados nos registos do teu servidor.
Cria filtros para excluir estes padrões. Sê prudente, porque um filtro demasiado rígido pode excluir tráfego real. Testa os filtros antes de os aplicares aos teus relatórios principais.
Compara com os registos do teu servidor
Os registos do servidor mostram informação do user-agent que as ferramentas de análise por vezes não captam. Procura nos registos do servidor user-agents que sejam claramente bots. Compara o tráfego desses user-agents nos registos do servidor com o que aparece na análise.
Se os registos do servidor mostram bastante mais tráfego do que a análise, os bots podem ser a diferença. Investiga a origem.
Como filtrar tráfego de bots
Ativa a filtragem de bots integrada
Liga a filtragem de bots nativa da tua ferramenta. No Google Analytics, vai a Admin > Definições da vista > Filtragem de bots. Marca a opção. Isto filtra dos relatórios os bots conhecidos sem estragar os teus dados.
Cria exclusões por IP
Se o tráfego de bots vem de intervalos de IPs específicos, cria um filtro para os excluir. Conhece primeiro os teus próprios IPs, para não excluíres por engano a tua equipa ou o teu escritório. Depois acrescenta intervalos de IPs de spam conhecidos ou IPs de centros de dados que não representam visitantes reais.
Filtra por user-agent
Algumas ferramentas de análise permitem filtrar pela cadeia de user-agent. Os bots costumam identificar-se no user-agent. Se a tua ferramenta o permitir, filtra os user-agents de bots conhecidos. Isto funciona melhor com bots óbvios do que com os sofisticados.
Cria segmentos para analisar os bots
Antes de excluíres os bots por completo, cria um segmento que os isole. Assim consegues medir o impacto. Quanto do tráfego são bots? Qual é a tua taxa de rejeição real sem eles? Perceber a dimensão do problema ajuda-te a tomar melhores decisões de filtragem.
O compromisso: excluir bots ou mantê-los
Razões para excluir bots
Os bots distorcem a tua perceção do comportamento real dos utilizadores. Taxas de conversão reais. Taxas de rejeição reais. Padrões de tráfego reais. Se estás a otimizar a experiência do utilizador humano, o tráfego de bots é ruído que deves excluir.
Razões para manter os bots nos teus dados
Os bots representam tráfego real a chegar ao teu site. Consomem largura de banda. Podem afetar a carga do servidor. Algumas equipas excluem os visitantes humanos dos dados de bots só para ver como é o tráfego não humano. Manter os bots diz-te algo importante sobre a composição do tráfego do teu site.
A solução prática
Cria vistas ou segmentos separados. Uma vista com a filtragem de bots ativada para tomar decisões. Outra com todo o tráfego para perceberes o quadro completo. Assim vês tanto a verdade humana como a realidade completa do tráfego.
Perguntas frequentes
Todos os bots são maus para a minha análise?
Não. Os bots dos motores de pesquisa são legítimos e úteis. Os rastreadores das redes sociais têm uma função. Só os bots de spam e de fraude de cliques distorcem os teus dados. A maioria das ferramentas de análise distingue entre bots legítimos e suspeitos. Com o criador de websites da WEMASY, podes configurar isto diretamente no teu website.
Quanto do tráfego costuma ser tráfego de bots?
Varia muito. Os sites de conteúdo podem ter 10-20% de tráfego de bots. As lojas online podem ter 30-40% se forem alvo de fraude de cliques. A única forma de saber o teu número é olhar para os teus dados.
Os bots podem disparar conversões na minha análise?
Sim. Alguns bots são sofisticados o suficiente para preencher formulários e concluir processos de checkout. É menos comum do que a simples inflação de tráfego, mas acontece. Procura conversões que não coincidam com o teu processador de pagamentos.
A filtragem de bots é permanente ou posso desligá-la?
É permanente depois de ativada, mas podes desligá-la a qualquer momento. Tem em conta que os dados históricos com a filtragem aplicada não mudam se a desativares mais tarde. Cria uma vista separada antes e depois da filtragem para comparar.
Como sei se um filtro está a bloquear tráfego real?
Testa-o. Cria um filtro numa vista ou segmento secundário. Compara as métricas com a tua vista sem filtros. Procura quedas que não façam sentido. Se o tráfego da localização do teu escritório cair quando filtras por IP, o teu filtro é demasiado amplo.
Devo excluir os bots dos motores de pesquisa da minha análise?
Normalmente não. Os motores de pesquisa a rastrearem o teu site é tráfego gratuito e um bom sinal de que o teu site está a ser indexado. Excluí-los dá-te uma imagem mais clara dos visitantes humanos, mas perdes visibilidade sobre a atividade dos rastreadores.