Salah satu pertanyaan yang sering kami terima tentang Panel Email Berizin kami adalah seberapa akurat panel ini dalam memprediksi tingkat inbox. Secara historis, ini merupakan pertanyaan yang sulit dijawab dengan otoritas apapun karena tidak ada sumber kebenaran dasar untuk mengukur, sehingga opini (dan keyakinan umum pada statistik sampel) mendominasi diskusi.

Sekarang, meskipun, dengan penyedia kotak surat utama melisensikan data penempatan inbox untuk platform mereka, mungkin untuk melakukan analisis nyata, yang kami lakukan pada beberapa 20.000 domain pengiriman pengirim besar dan kecil, baik di platform pengiriman kami maupun di penyedia lainnya. 

Hasilnya menggembirakan. Panel berizin sangat akurat, bahkan dengan sinyal yang relatif rendah, dan menjadi sangat akurat saat jumlah panelis yang terlihat dalam sebuah kiriman meningkat. Menggunakan metode statistik umum, kami melihat kesalahan kuadrat rata-rata akar (RMSE – analog dari deviasi standar) antara tingkat inboxing yang terlihat pada penyedia utama dengan apa yang dilihat panel kami.

Dalam analisis kami, kami mencatat bahwa pengirim yang mengirimkan email mereka melalui penyedia layanan email teratas melihat korelasi yang jauh lebih baik antara tingkat inbox panel dan tingkat inbox yang sebenarnya. Mekanismenya tidak diketahui, tetapi kami menduga bahwa standar kepatuhan yang ditegakkan penyedia layanan besar kepada pelanggan mereka umumnya menghasilkan tingkat inboxing yang lebih konsisten di seluruh audiens mereka sehingga kurang rentan terhadap penyimpangan. Kita dapat melihat ini jika kita membatasi plot kita hanya pada pengirim di ESP teratas, yang juga mengurangi RMSE sekitar 30%.

Bahkan ketika sejumlah kecil (10) panelis harian melihat aliran email, kami melihat korelasi yang sangat kuat antara tingkat inbox yang terlihat oleh panel dan kebenaran dasar.

Jika kita hanya mempertimbangkan aliran di mana 50 atau lebih panelis terlihat setiap hari, korelasi menjadi lebih ketat.

Jika kita melihat bagaimana tingkat kesalahan ini bervariasi dari waktu ke waktu, kita melihat beberapa hal: 

• Bahkan pada jumlah panelis unik yang sangat kecil menerima email, tingkat kesalahan di bawah 10%.

• Segera turun menjadi 4% seiring peningkatan jumlah panelis.

• Akhirnya mendekati 2% – menunjukkan bahwa data panel 98% akurat. 

Untuk tujuan mengidentifikasi masalah keterkiriman aliran email, akurasi ini sangat fantastis.

Jadi Anda mungkin bertanya: dengan penyedia besar menawarkan angka kebenaran dasar, apa gunanya memiliki data panel juga, bahkan jika sangat berkorelasi? Mayoritas penyedia kotak surat – termasuk raksasa seperti Google dan Microsoft – tidak menawarkan data penempatan inbox, sehingga untuk pesan yang dikirimkan di sana, Anda masih memerlukan sumber seperti data panel untuk memahami tingkat inboxing. 

Dan sekarang kita semua bisa yakin pada akurasinya untuk kasus-kasus tersebut.