Il tuo traffico raddoppia di colpo. Sembra una bella notizia. Poi ti accorgi che il picco arriva da un solo paese in cui non operi, sempre sulla stessa pagina. Sono bot.
Il traffico dei bot è invisibile per impostazione predefinita. Arriva nei tuoi report e sembra fatto di visitatori veri. Gonfia le metriche, rovina i tassi di conversione e ti impedisce di capire che cosa funziona davvero.
Che cosa si intende per traffico di bot
Non tutto il traffico non umano è dannoso. I motori di ricerca che scansionano il tuo sito sono bot. Lo sono anche i crawler dei link sui social. Sono bot legittimi che vuoi nei tuoi dati.
I bot di spam sono un'altra cosa. Sono visite automatiche pensate per gonfiare le metriche del traffico, manipolare le statistiche o scansionare il tuo sito per copiarlo. Distorcono i dati e sprecano le tue risorse.
Bot legittimi
Motori di ricerca come Google e altri. Crawler dei social, come quello di Facebook. Bot di monitoraggio e di controllo della disponibilità del sito. Questi bot hanno uno scopo e di solito vanno inclusi nelle tue statistiche, anche se alcuni team li escludono per concentrarsi sul comportamento delle persone.
Bot di spam
Bot di referral spam che generano traffico di riferimento falso. Bot di frode sui clic che simulano conversioni. Bot scraper che copiano i tuoi contenuti. Bot a forza bruta che cercano vulnerabilità. Non hanno nessuno scopo legittimo e distorcono i tuoi dati.
Bot legittimi ma sospetti
Alcuni bot sono in una zona grigia. IP di data center che fanno ping al tuo sito. Tracker di affiliazione che sembrano utenti. Bot di verifica degli annunci che cliccano sugli annunci per controllare che funzionino. Sono tecnicamente legittimi, ma possono distorcere le tue metriche a seconda dei tuoi obiettivi.
Come i bot distorcono le tue statistiche
Numeri di traffico gonfiati
I bot aumentano il conteggio delle visualizzazioni di pagina. Pensi che il tuo sito riceva 1.000 visitatori al giorno, ma 300 sono bot. Il traffico umano reale è solo 700. Prendi decisioni basate su numeri gonfiati.
Tassi di conversione distorti
Alcuni bot fanno scattare eventi di conversione. Cliccano pulsanti. Inviano moduli. Il numero delle tue conversioni sembra migliore di quello che è. Il tasso di conversione risulta più alto del reale.
Fonti di traffico falsate
I bot di referral spam fanno sembrare che il traffico arrivi da siti che in realtà non ti hanno mai mandato nessuno. Il report del traffico di riferimento si riempie di fonti false. Potresti costruire partnership con fonti che non esistono.
Attribuzione sballata
I bot creano sessioni che rovinano il tuo modello di attribuzione. Cliccano gli annunci, se ne vanno, poi tornano. Il tuo modello di attribuzione dà loro il merito di conversioni che non hanno causato. Le fonti vere si prendono la colpa di problemi causati dai bot.
Come riconoscere il traffico dei bot
Cerca schemi di traffico diversi dal comportamento umano
I bot hanno schemi prevedibili. Sempre lo stesso identico numero di pagine viste per sessione. Nessuna variazione nello scorrimento della pagina o nel tempo sul sito. Traffico da paesi che non c'entrano con la tua attività. Più conversioni nel giro di pochi secondi. Questi schemi indicano traffico non umano.
Usa il filtro bot del tuo strumento di statistiche
La maggior parte degli strumenti di statistiche ha un rilevamento dei bot integrato. Google Analytics ha una casella per escludere i bot noti. Filtra in base all'elenco dei bot noti dell'Interactive Advertising Bureau. Attivalo per primo: cattura i bot più evidenti senza falsi positivi.
Crea filtri personalizzati per gli schemi di spam
Alcuni bot di spam passano i filtri standard. Cerca schemi nei tuoi dati: molto traffico da un solo IP, traffico da intervalli di IP di data center noti, sessioni con tempo di rimbalzo pari a zero, conversioni da bot chiaramente riconoscibili nei log del server.
Crea filtri per escludere questi schemi. Sii prudente: un filtro troppo rigido può escludere traffico vero. Prova i filtri prima di applicarli ai report principali.
Confronta con i log del server
I log del server mostrano informazioni sullo user-agent che gli strumenti di statistiche a volte non vedono. Controlla nei log del server gli user-agent che sono chiaramente bot. Confronta il traffico di quegli user-agent nei log con quello che compare nelle statistiche.
Se i log del server mostrano molto più traffico delle statistiche, la differenza potrebbero essere i bot. Indaga sulla fonte.
Come filtrare il traffico dei bot
Attiva il filtro bot integrato
Attiva il filtro bot nativo del tuo strumento. In Google Analytics vai su Amministratore > Impostazioni vista > Filtro bot. Seleziona la casella. In questo modo i bot noti vengono tolti dai report senza rovinare i tuoi dati.
Crea esclusioni basate sull'IP
Se il traffico dei bot arriva da intervalli di IP precisi, crea un filtro per escluderli. Prima di tutto conosci i tuoi IP: non escludere per sbaglio il tuo team o il tuo ufficio. Poi aggiungi gli intervalli di IP di spam noti o gli IP di data center che non rappresentano visitatori reali.
Filtra per user-agent
Alcuni strumenti di statistiche permettono di filtrare per stringa user-agent. I bot spesso si dichiarano nello user-agent. Se il tuo strumento lo permette, escludi gli user-agent dei bot noti. Funziona meglio con i bot evidenti che con quelli sofisticati.
Crea segmenti per analizzare i bot
Prima di escludere del tutto i bot, crea un segmento che li isola. Così puoi misurarne l'impatto. Quanto traffico è fatto di bot? Qual è il tuo vero tasso di rimbalzo senza di loro? Capire la portata del problema ti aiuta a decidere meglio come filtrare.
Il compromesso: escludere i bot o tenerli
Motivi per escludere i bot
I bot distorcono la tua comprensione del comportamento reale degli utenti. Conversioni reali. Tassi di rimbalzo reali. Andamenti del traffico reali. Se ottimizzi per l'esperienza delle persone, il traffico dei bot è rumore da escludere.
Motivi per tenere i bot nei tuoi dati
I bot sono traffico reale che arriva sul tuo sito. Consumano banda. Possono influire sul carico del server. Alcuni team escludono i visitatori umani dai dati dei bot solo per vedere com'è il traffico non umano. Tenere i bot ti dice qualcosa di importante su come è composto il traffico del tuo sito.
La soluzione pratica
Crea viste o segmenti separati. Una vista con il filtro bot attivo per prendere decisioni. Una vista con tutto il traffico per capire il quadro completo. In questo modo vedi sia la verità sulle persone sia la realtà completa del traffico.
Domande frequenti
Tutti i bot fanno male alle mie statistiche?
No. I bot dei motori di ricerca sono legittimi e utili. I crawler dei social hanno uno scopo. Solo i bot di spam e di frode sui clic distorcono i dati. La maggior parte degli strumenti di statistiche distingue tra bot legittimi e sospetti. Con il creatore di siti di WEMASY puoi impostarlo direttamente sul tuo sito.
Quanto traffico è di solito traffico di bot?
Varia molto. I siti di contenuti possono vedere il 10-20% di traffico di bot. I negozi online possono arrivare al 30-40% se sono presi di mira dalla frode sui clic. L'unico modo per sapere il tuo numero è guardare i tuoi dati.
I bot possono far scattare conversioni nelle mie statistiche?
Sì. Alcuni bot sono abbastanza sofisticati da compilare moduli e completare il checkout. È meno comune del semplice gonfiamento del traffico, ma succede. Controlla se ci sono conversioni che non corrispondono al tuo sistema di pagamento.
Il filtro bot è permanente o posso disattivarlo?
Una volta attivato è permanente sui dati nuovi, ma puoi disattivarlo quando vuoi. Tieni presente che i dati passati già filtrati non cambiano se lo disattivi dopo. Crea una vista separata prima e dopo il filtro per confrontare.
Come faccio a sapere se un filtro blocca traffico vero?
Provalo. Crea il filtro su una vista o un segmento secondario. Confronta le metriche con la tua vista non filtrata. Cerca cali che non hanno senso. Se il traffico dalla sede del tuo ufficio cala quando filtri per IP, il filtro è troppo ampio.
Devo escludere i bot dei motori di ricerca dalle mie statistiche?
Di solito no. Se i motori di ricerca scansionano il tuo sito è traffico gratuito e un buon segno: significa che il tuo sito viene indicizzato. Escluderli ti dà un quadro più chiaro dei visitatori umani, ma perdi visibilità sull'attività dei crawler.