Salah satu pertanyaan yang sering kami terima tentang Panel Email Berizin kami adalah seberapa akuratnya dalam memprediksi tingkat kotak masuk. Sejarahnya, ini adalah pertanyaan yang sulit dijawab dengan otoritas karena tidak ada sumber kebenaran yang dapat diukur, sehingga pendapat (dan kepercayaan umum pada statistik sampel) menguasai diskusi.
Sekarang, dengan penyedia kotak surat besar yang melisensikan data penempatan kotak masuk untuk platform mereka, kini dimungkinkan untuk melakukan analisis nyata, yang kami lakukan pada sekitar 20.000 domain pengirim yang berbeda, baik besar maupun kecil, baik di platform pengiriman kami maupun di penyedia lain.
Hasilnya sangat menarik. Panel berizin ini sangat akurat, bahkan dengan sinyal yang relatif rendah, dan menjadi sangat akurat seiring meningkatnya jumlah panelis yang terlihat dalam pengiriman. Menggunakan metode statistik umum, kami melihat akar rata-rata kuadrat kesalahan (RMSE – sebuah analog dari deviasi standar) antara tingkat kotak masuk yang terlihat di penyedia utama dengan apa yang dilihat panel kami.
Dalam analisis kami, kami mencatat bahwa pengirim yang mengirim email mereka melalui penyedia layanan email teratas melihat korelasi yang jauh lebih baik antara tingkat kotak masuk panel dan tingkat kotak masuk yang sebenarnya. Mekanisme untuk ini tidak diketahui, tetapi kami menduga bahwa standar kepatuhan yang harus dipatuhi oleh penyedia layanan besar umumnya menghasilkan tingkat kotak masuk yang lebih konsisten di antara audiens mereka dan karenanya kurang rentan terhadap penyimpangan. Kami dapat melihat ini jika kami membatasi plot kami hanya untuk pengirim yang berada di penyedia layanan email teratas, yang juga mengurangi RMSE sekitar 30%.
Bahkan ketika sejumlah kecil (10) panelis harian melihat aliran email, kami melihat korelasi yang sangat kuat antara tingkat kotak masuk yang terlihat oleh panel dan kebenaran dasar.
Jika kami hanya mempertimbangkan aliran di mana 50 atau lebih panelis terlihat setiap hari, korelasi menjadi semakin ketat.
Jika kami melihat bagaimana tingkat kesalahan ini bervariasi dari waktu ke waktu, kami melihat beberapa hal:
Bahkan dengan jumlah panelis unik yang sangat kecil yang menerima email, tingkat kesalahan berada di bawah 10%.
Itu dengan cepat turun menjadi 4% seiring meningkatnya jumlah panelis.
Itu akhirnya mendekati 2% – menunjukkan bahwa data panel akurat 98%.
Untuk tujuan mengidentifikasi masalah keterjangkauan aliran email, akurasi ini fantastis.
Jadi Anda mungkin bertanya: dengan penyedia besar yang menawarkan angka kebenaran dasar, apa gunanya memiliki data panel juga, bahkan jika itu sangat berkorelasi? Mayoritas penyedia kotak surat – termasuk raksasa seperti Google dan Microsoft – tidak menawarkan data penempatan kotak masuk, sehingga untuk pesan yang diantar ke sana, Anda masih memerlukan sumber seperti data panel untuk memahami tingkat kotak masuk.
Dan sekarang kita semua dapat percaya pada akurasinya untuk kasus-kasus tersebut.