Una delle domande che riceviamo regolarmente sul nostro Permissioned Email Panel è quanto sia accurato in termini di previsione dei tassi di ricezione nella inbox. Storicamente, è stata una domanda difficile a cui rispondere con autorità poiché non esisteva una fonte di verità assoluta con cui misurarsi, e così le opinioni (e la fiducia generale nelle statistiche campione) governavano la discussione.
Ora, però, con un importante provider di caselle postali che concede in licenza i dati di posizionamento delle email nelle inbox per la loro piattaforma, è possibile fare una vera analisi, che abbiamo effettuato su circa 20.000 domini di invio distinti di mittenti grandi e piccoli, sia sulla nostra piattaforma di invio che su altri fornitori.
I risultati sono entusiasmanti. Il pannello autorizzato è altamente accurato, anche con un segnale relativamente basso, e diventa estremamente preciso quando aumenta il numero di partecipanti distinti visti in un invio. Utilizzando metodi statistici comuni, esaminiamo l'errore quadratico medio (RMSE – un analogo della deviazione standard) tra il tasso di ricezione nelle inbox come visto dal provider principale con quello che il nostro pannello vede.
Nella nostra analisi, abbiamo notato che i mittenti che inviano la loro posta tramite i migliori fornitori di servizi email vedono una correlazione materialmente migliore tra il tasso di ricezione nelle inbox del pannello e il tasso di ricezione reale. Il meccanismo per questo non è noto, ma postuliamo che gli standard di conformità che i grandi fornitori di servizi mantengono per i loro clienti generalmente risultano in tassi di ricezione più consistenti su tutto il loro pubblico e quindi sono meno inclini a deviazioni. Possiamo vedere questo se limitiamo il nostro grafico solo ai mittenti sulla parte superiore delle ESP, il che riduce anche l'RMSE di circa il 30%.
Anche quando un piccolo numero (10) di partecipanti quotidiani vede il flusso di posta, vediamo una correlazione molto forte tra il tasso di ricezione nelle inbox visto dal pannello e la verità assoluta.
Se consideriamo solo i flussi in cui 50 o più partecipanti sono visti quotidianamente, la correlazione diventa ancora più stretta.
Se osserviamo come questo tasso di errore varia nel tempo, vediamo alcune cose:
Anche con numeri estremamente piccoli di partecipanti unici che ricevono la posta, il tasso di errore è inferiore al 10%.
Si riduce rapidamente al 4% con l'aumentare del numero di partecipanti.
Alla fine si avvicina al 2% – mostrando che i dati del pannello sono accurati al 98%.
Ai fini dell'identificazione dei problemi di consegna del flusso di posta, questa precisione è fantastica.
Quindi potreste chiedervi: con un importante provider che offre numeri di verità assoluta, qual è l'utilità di avere anche dati del pannello, anche se sono altamente correlati? La maggior parte dei fornitori di caselle postali - inclusi titani come Google e Microsoft - non offrono dati di posizionamento nelle inbox, e quindi per i messaggi consegnati lì, è ancora necessario un'origine come i dati del pannello per comprendere i tassi di ricezione.
E ora tutti possiamo essere sicuri della sua precisione per quei casi.
