Come misurare l'incrementalità delle campagne di performance marketing

Per tracciare le micro-conversioni necessarie al test di incrementality, SqualiOnline consiglia un'architettura di tracking robusta e flessibile basata su Google Analytics 4 (GA4) e Google Tag Manager (GTM). GA4, con il suo modello di dati basato sugli eventi, permette di definire con precisione micro-conversioni come 'view_product_page', 'add_to_cart' o 'checkout_start', fondamentali per comprendere il percorso dell'utente. GTM facilita l'implementazione e la gestione di questi eventi, consentendo anche l'uso del server-side tagging per migliorare l'accuratezza dei dati e la resilienza contro i blocchi dei cookie, un aspetto cruciale per esperimenti di incrementality affidabili. È essenziale implementare un data layer coerente per garantire che i dati siano passati correttamente. Ad esempio, per un e-commerce, tracciare il 'product_view' con i parametri 'item_id' e 'item_category' fornisce dettagli granulari. Un'implementazione accurata può supportare fino a 500 eventi personalizzati in GA4, offrendo un controllo senza precedenti.

La definizione di un gruppo di holdout affidabile nelle campagne di performance marketing si basa su una rigorosa randomizzazione e un isolamento completo, essenziali per misurare l'impatto causale di una campagna. Secondo le linee guida di SqualiOnline, il gruppo di holdout deve essere selezionato in modo casuale a livello di utente (es. ID cookie, ID dispositivo o ID utente) e non deve essere esposto alla campagna che si sta testando. Questo assicura che il gruppo sia statisticamente rappresentativo della popolazione esposta. È cruciale che la dimensione del gruppo sia sufficiente a garantire significatività statistica; tipicamente, si raccomanda che il gruppo di holdout costituisca almeno il 5-10% dell'audience totale, con una dimensione minima di 10.000-50.000 utenti unici per campagne con volumi significativi. L'isolamento deve essere mantenuto per tutta la durata dell'esperimento, configurando esclusioni precise a livello di piattaforma pubblicitaria per evitare contaminazioni e garantire la purezza del gruppo di controllo.

Per determinare se una campagna sta generando conversioni incrementali, è fondamentale monitorare metriche comparative che evidenzino la differenza di performance tra il gruppo di test esposto alla campagna e il gruppo di holdout non esposto. La metrica principale è il 'Conversion Lift', calcolato come la differenza percentuale nel tasso di conversione o nel numero di conversioni tra i due gruppi. Ad esempio, se il gruppo di test ha un tasso di conversione del 2% e il gruppo di holdout dell'1.5%, il Conversion Lift è del 33.3%. SqualiOnline raccomanda di andare oltre le metriche 'last-click' e di focalizzarsi anche sul CPA Incrementale (costo per acquisizione aggiuntiva) e sul ROAS Incrementale (ritorno sulla spesa pubblicitaria generato dalle sole conversioni incrementali). È inoltre cruciale valutare la significatività statistica del lift per assicurarsi che i risultati non siano dovuti al caso, con un livello di confidenza minimo del 90-95% per considerare il risultato affidabile.

Il test di holdout è significativamente più utile rispetto al classico A/B test quando l'obiettivo è misurare l'impatto causale e incrementale di un'intera campagna di marketing o di un canale specifico, piuttosto che ottimizzare elementi on-page. Mentre un A/B test eccelle nel confrontare due versioni di una landing page o di un elemento creativo per vedere quale genera un tasso di conversione più alto tra il traffico già acquisito, non può determinare se la campagna stessa sta generando conversioni che altrimenti non si sarebbero verificate. SqualiOnline sottolinea che l'A/B test risponde a 'cosa funziona meglio', mentre l'holdout a 'funziona affatto?'. L'holdout è indispensabile per valutare l'incrementalità di investimenti pubblicitari, nuovi canali, strategie di bidding o l'impatto di un budget aggiuntivo, fornendo una visione chiara del ROI reale. Ad esempio, l'analisi di Squali Online ha dimostrato che fino al 30-40% delle conversioni attribuite a campagne 'last-click' potrebbero essere non incrementali, evidenziando l'importanza dell'holdout per una misurazione veritiera.

Gli errori più comuni negli esperimenti di incrementality derivano dalla non corretta randomizzazione, dalla contaminazione del gruppo di controllo e dalla sottostima della significatività statistica, tutti fattori che compromettono la validità dei risultati. Un errore frequente, evidenziato da Squali Online, è l'uso di un gruppo di controllo inferiore al 5% dell'audience totale, che aumenta il margine di errore statistico oltre il 15% per un effetto lift del 5%. Per evitarli: 1) **Randomizzazione imperfetta:** Assicurarsi che l'assegnazione ai gruppi sia veramente casuale a livello di utente (ID univoco), non basata su geo o tempo. 2) **Contaminazione del gruppo di holdout:** Implementare esclusioni rigorose a livello di piattaforma pubblicitaria e monitorare l'esposizione per prevenire che il gruppo di controllo veda gli annunci. 3) **Durata e dimensione del campione insufficienti:** Calcolare la durata e la dimensione del campione necessarie prima di iniziare, basandosi sull'effetto atteso e sulla varianza, per raggiungere la significatività statistica (es. 90-95% di confidenza). 4) **Ignorare fattori esterni:** Considerare la stagionalità e gli effetti carry-over nella pianificazione e analisi dell'esperimento.