Jednym z pytań, które regularnie otrzymujemy na temat naszego Panelu E-mailowego z Zezwoleniem, jest to, jak dokładne jest prognozowanie wskaźników skrzynki odbiorczej. Historycznie, było to trudne pytanie do odpowiedzenia z jakąkolwiek autorytetą, ponieważ nie było źródła prawdy, z którym można by się zmierzyć, a więc opinie (i ogólna wiara w dane statystyczne) dominowały w dyskusji.
Teraz jednak, dzięki dostawcy skrzynek pocztowych, który udziela licencji na dane o umieszczaniu w skrzynce odbiorczej dla swojej platformy, możliwe jest przeprowadzenie rzeczywistej analizy, którą przeprowadziliśmy na około 20 000 różnych domen wysyłających, zarówno dużych, jak i małych, zarówno na naszej platformie wysyłkowej, jak i u innych dostawców.
Wyniki są ekscytujące. Panel z zezwoleniem jest niezwykle dokładny, nawet przy stosunkowo niskim sygnale, a także staje się niezwykle dokładny, gdy zwiększa się liczba unikalnych panelistów zaobserwowanych w wysyłce. Używając powszechnych metod statystycznych, przyglądamy się błędowi średniego kwadratu (RMSE – analog standardowego odchylenia) między wskaźnikiem skrzynki odbiorczej, jaki widzimy u głównego dostawcy, a tym, co widzi nasz panel.
W naszej analizie zauważyliśmy, że nadawcy, którzy wysyłają swoją pocztę przez najlepszych dostawców usług e-mailowych, widzą znacznie lepszą korelację między wskaźnikiem skrzynki odbiorczej panelu a prawdziwym wskaźnikiem skrzynki odbiorczej. Mechanizm tego zjawiska nie jest znany, ale postulujemy, że standardy zgodności, które duzi dostawcy usług stawiają swoim klientom, zazwyczaj skutkują bardziej spójnymi wskaźnikami umieszczania w skrzynce odbiorczej wśród ich odbiorców i są mniej podatne na zniekształcenia. Możemy to zobaczyć, jeśli ograniczymy nasz wykres do nadawców tylko na najlepszych ESP, co również zmniejsza RMSE o około 30%.
Nawet gdy mała liczba (10) codziennych panelistów widzi strumień poczty, widzimy bardzo silną korelację między wskaźnikiem skrzynki odbiorczej, jaką widzi panel, a prawdą rzeczywistą.
Jeśli rozważymy tylko strumienie, w których codziennie widzianych jest 50 lub więcej panelistów, korelacja staje się jeszcze mocniejsza.
Jeśli przyjrzymy się, jak ten wskaźnik błędu zmienia się w czasie, widzimy kilka rzeczy:
Nawet przy niezwykle małych liczbach unikalnych panelistów odbierających pocztę, wskaźnik błędu wynosi poniżej 10%.
Szybko spada do 4%, gdy liczba panelistów wzrasta.
Ostatecznie zbliża się do 2% – co pokazuje, że dane panelowe są 98% dokładne.
W kontekście identyfikacji problemów z dostarczalnością strumieni pocztowych ta dokładność jest fantastyczna.
Możesz zapytać: mając głównego dostawcę oferującego dane prawdziwe, jakie jest znaczenie posiadania danych panelowych, nawet jeśli są one silnie skorelowane? Większość dostawców skrzynek pocztowych – w tym potentaci tacy jak Google i Microsoft – nie oferują danych o umieszczaniu w skrzynce odbiorczej, więc dla wiadomości dostarczanych tam potrzebujesz nadal źródła, takiego jak dane panelowe, aby zrozumieć wskaźniki umieszczania w skrzynce odbiorczej.
A teraz wszyscy możemy być pewni ich dokładności w tych przypadkach.