Salah satu pertanyaan yang sering kami terima tentang Panel Email dengan Izin kami adalah seberapa akurat itu dalam hal memprediksi tingkat masuk kotak. Secara historis, ini adalah pertanyaan yang sulit dijawab dengan otoritas karena tidak ada sumber kebenaran yang dapat diukur, sehingga opini (dan kepercayaan umum pada statistik sampel) mendominasi diskusi.
Sekarang, dengan penyedia kotak surat utama melisensikan data penempatan kotak masuk untuk platform mereka, dimungkinkan untuk melakukan analisis nyata, yang kami lakukan pada sekitar 20.000 domain pengiriman yang berbeda dari pengirim besar dan kecil, baik di platform pengiriman kami maupun pada penyedia lainnya.
Hasilnya sangat menarik. Panel dengan izin sangat akurat, bahkan dengan sinyal yang relatif rendah, dan menjadi sangat akurat saat jumlah panelis yang berbeda yang terlihat dalam pengiriman meningkat. Menggunakan metode statistik umum, kami melihat kesalahan akar kuadrat rata-rata (RMSE – analog dari standar deviasi) antara tingkat masuk kotak seperti yang terlihat di penyedia utama dengan apa yang dilihat oleh panel kami.
Dalam analisis kami, kami mencatat bahwa pengirim yang mengirim email mereka melalui penyedia layanan email terkemuka melihat korelasi yang secara material lebih baik antara tingkat masuk panel dan tingkat masuk sebenarnya. Mekanisme untuk ini tidak diketahui, tetapi kami menduga bahwa standar kepatuhan yang diterapkan oleh penyedia layanan besar kepada pelanggan mereka umumnya menghasilkan tingkat masuk kotak yang lebih konsisten di seluruh audiens mereka dan karenanya kurang rentan terhadap bias. Kami dapat melihat ini jika kami membatasi plot kami hanya untuk pengirim di ESP teratas, yang juga mengurangi RMSE sekitar 30%.
Bahkan ketika sejumlah kecil (10) panelis harian melihat aliran email, kami melihat korelasi yang sangat kuat antara tingkat masuk kotak seperti yang dilihat oleh panel dan kebenaran dasar.
Jika kami hanya mempertimbangkan aliran di mana 50 atau lebih panelis terlihat setiap hari, korelasinya menjadi lebih kuat.
Jika kami melihat bagaimana tingkat kesalahan ini bervariasi dari waktu ke waktu, kami melihat beberapa hal:
Bahkan dengan jumlah panelis unik yang sangat kecil menerima email, tingkat kesalahan di bawah 10%.
Dengan cepat turun menjadi 4% saat jumlah panelis meningkat.
Akhirnya mendekati 2% – menunjukkan bahwa data panel 98% akurat.
Untuk tujuan mengidentifikasi masalah pengiriman aliran email, akurasi ini luar biasa.
Jadi Anda mungkin bertanya: dengan penyedia utama yang menawarkan angka kebenaran dasar, apa kegunaan memiliki data panel juga, meskipun sangat berkorelasi? Mayoritas penyedia kotak surat – termasuk raksasa seperti Google dan Microsoft – tidak menawarkan data penempatan kotak masuk, jadi untuk pesan yang disampaikan di sana, Anda masih memerlukan sumber seperti data panel untuk memahami tingkat masuk kotak.
Dan sekarang kita semua dapat yakin dengan akurasinya untuk kasus-kasus tersebut.
