Precisión de los Datos del Panel Autorizados de Aves

Pájaro

21 ago 2021

Correo electrónico

1 min read

Precisión de los Datos del Panel Autorizados de Aves

Puntos clave

    • El Panel de Correo Electrónico con Permiso de Bird históricamente ha sido difícil de validar debido a la falta de datos de ubicación de "inbox" de "ground truth" por parte de los proveedores de buzón.

    • Ahora, un importante proveedor de buzón licencia datos de ubicación de "inbox", lo que permite una comparación directa en más de 20,000 dominios de envío.

    • El análisis muestra una precisión extremadamente alta entre las estimaciones de tasas de "inbox" basadas en el panel de Bird y la verdadera tasa de "inbox".

    • La precisión mejora a medida que más panelistas distintos reciben el flujo de correo electrónico—fuerte incluso con baja señal, excelente a volúmenes más altos.

    • Se utiliza RMSE (error cuadrático medio) para medir la desviación entre las predicciones del panel y las tasas de "inbox" de "ground truth".

    • Los remitentes que usan los principales ESPs muestran una correlación materialmente mejor—probablemente debido a prácticas de cumplimiento más estrictas y un "inboxing" más consistente.

    • Con solo 10 panelistas diarios, las tasas de error se mantienen por debajo del 10%.

    • Con más de 50 panelistas, el error cae significativamente y se vuelve muy ajustado.

    • La tasa de error se acerca rápidamente al ~2% a medida que crece el tamaño del panel—indicando un ~98% de precisión en la predicción de la ubicación de "inbox".

    • Este nivel de precisión es excelente para diagnosticar problemas de entregabilidad en todo el flujo de correo de un remitente.

    • Los datos del panel siguen siendo críticos porque importantes proveedores como Google y Microsoft no suministran métricas de ubicación de "inbox".

    • Con la correlación comprobada, los remitentes pueden confiar con confianza en los datos del panel de Bird para comprender la entrega de "inboxing" donde no existen "ground truth".

Destacados de Q&A

  • ¿Qué problema fue históricamente difícil de resolver respecto a la colocación en Inbox?

    No había una "verdad fundamental" confiable para validar qué tan exactamente un panel autorizado predecía la colocación en el Inbox a escala.

  • ¿Qué cambió que permitió la medida adecuada?

    Un importante proveedor de servicios de correo comenzó a licenciar datos reales de colocación en inbox, permitiendo a Bird comparar sus predicciones de panel con resultados reales.

  • ¿Qué tan grande era el conjunto de datos del análisis?

    Más de 20,000 dominios de envío, que van desde remitentes pequeños hasta remitentes empresariales muy grandes.

  • ¿Qué métrica se utilizó para evaluar la precisión?

    RMSE (root mean square error), una forma estándar de medir la desviación entre valores predichos y reales.

  • ¿Qué tan preciso es el panel con un número muy pequeño de panelistas diarios?

    Incluso con solo 10 panelistas distintos, las tasas de error se mantienen por debajo del 10%, lo cual ya es fuerte para diagnósticos de entrega.

  • ¿Qué sucede cuando más panelistas ven el flujo de correos electrónicos?

    La precisión aumenta rápidamente—a partir de 50+ panelistas, la correlación se vuelve extremadamente fuerte y el error disminuye drásticamente.

  • ¿Cuál es la mejor precisión observada?

    El error se aproxima al ~2%, lo que significa que los datos del panel de Bird pueden ser hasta un 98% precisos en comparación con la colocación real en el inbox.

  • ¿Por qué los principales ESPs muestran una mejor correlación?

    Probablemente debido a estándares de cumplimiento más estrictos, que conducen a patrones de recepción más estables y menos variabilidad en el comportamiento de entregabilidad.

  • ¿Es la precisión suficiente para diagnosticar problemas de entrega?

    Absolutamente—las tasas de error por debajo del 5–10% proporcionan más que suficiente precisión para detectar anomalías y tendencias de entregabilidad.

  • ¿Por qué siguen siendo necesarios los datos del panel si un proveedor de buzón de correo ofrece la verdad absoluta?

    Porque los principales proveedores de correo (Google, Microsoft, etc.) no proporcionan informes de colocación en la Inbox, los datos de panel llenan esta brecha de visibilidad.

  • ¿Qué demuestra el análisis sobre el modelo de panel de Bird en general?

    Que es estadísticamente fiable en una amplia gama de dominios y comportamientos de envío, incluso con tamaños de muestra pequeños.

  • ¿Cuál es el resultado práctico para los remitentes?

    Pueden confiar en los datos del panel de Bird para guiar las decisiones de entregabilidad, especialmente en ecosistemas donde no existen otros datos de ubicación de Inbox.

Una de las preguntas que recibimos regularmente sobre nuestro Panel de Correo Electrónico con Permisos es cuán preciso es en términos de pronosticación de las tasas de entrada al buzón. Históricamente, esta ha sido una pregunta difícil de responder con autoridad ya que no había una fuente de verdad para medir en comparación, por lo que las opiniones (y la fe general en estadísticas de muestra) dominaban la discusión.

Ahora, sin embargo, con un proveedor de buzón principal licenciando datos de colocación de bandeja de entrada para su plataforma, es posible realizar un análisis real, que hicimos sobre unos 20,000 dominios de envío distintos de remitentes grandes y pequeños, tanto en nuestra plataforma de envío como en otros proveedores. 

Los resultados son emocionantes. El panel con permisos es altamente preciso, incluso con una señal relativamente baja, y se vuelve extremadamente preciso a medida que se aumenta el número de panelistas distintos vistos en un envío. Usando métodos estadísticos comunes, observamos el error cuadrático medio (RMSE – un análogo de la desviación estándar) entre la tasa de entrada al buzón vista en el proveedor principal y lo que ve nuestro panel.

En nuestro análisis, notamos que los remitentes que envían su correo a través de los principales proveedores de servicios de correo electrónico ven una correlación materialmente mejor entre la tasa de entrada al buzón del panel y la tasa de entrada verdadera. No se conoce el mecanismo para esto, pero postulamos que los estándares de cumplimiento a los que los grandes proveedores de servicios mantienen a sus clientes generalmente resultan en tasas de entrada al buzón más consistentes a través de su audiencia y, por lo tanto, son menos propensas a sesgos. Podemos ver esto si restringimos nuestro gráfico solo a remitentes en los principales ESPs, lo cual también reduce el RMSE en aproximadamente un 30%.

Incluso cuando un pequeño número (10) de panelistas diarios ven el flujo de correo, vemos una correlación muy fuerte entre la tasa de entrada al buzón vista por el panel y la verdad fundamental.

Si consideramos solo los flujos donde 50 o más panelistas son vistos diariamente, la correlación se vuelve aún más estrecha.

Si miramos cómo varía esta tasa de error a lo largo del tiempo, vemos algunas cosas: 

  • Incluso con un número extremadamente pequeño de panelistas únicos recibiendo el correo, la tasa de error es inferior al 10%.

  • Rápidamente cae al 4% a medida que aumenta el número de panelistas.

  • Eventualmente se aproxima al 2% – mostrando que los datos del panel son un 98% precisos. 

Para los propósitos de identificar problemas de entregabilidad del flujo de correo, esta precisión es fantástica.

Entonces podrías preguntar: con un proveedor principal ofreciendo números de verdad fundamental, ¿cuál es la utilidad de tener datos de panel también, aunque esté altamente correlacionado? La mayoría de los proveedores de buzón – incluidos los titanes como Google y Microsoft – no ofrecen datos de colocación en bandeja de entrada, por lo que para los mensajes allí entregados, todavía necesitas una fuente como los datos de panel para entender las tasas de entrada al buzón. 

Y ahora todos podemos estar seguros de su precisión en esos casos.

Una de las preguntas que recibimos regularmente sobre nuestro Panel de Correo Electrónico con Permisos es cuán preciso es en términos de pronosticación de las tasas de entrada al buzón. Históricamente, esta ha sido una pregunta difícil de responder con autoridad ya que no había una fuente de verdad para medir en comparación, por lo que las opiniones (y la fe general en estadísticas de muestra) dominaban la discusión.

Ahora, sin embargo, con un proveedor de buzón principal licenciando datos de colocación de bandeja de entrada para su plataforma, es posible realizar un análisis real, que hicimos sobre unos 20,000 dominios de envío distintos de remitentes grandes y pequeños, tanto en nuestra plataforma de envío como en otros proveedores. 

Los resultados son emocionantes. El panel con permisos es altamente preciso, incluso con una señal relativamente baja, y se vuelve extremadamente preciso a medida que se aumenta el número de panelistas distintos vistos en un envío. Usando métodos estadísticos comunes, observamos el error cuadrático medio (RMSE – un análogo de la desviación estándar) entre la tasa de entrada al buzón vista en el proveedor principal y lo que ve nuestro panel.

En nuestro análisis, notamos que los remitentes que envían su correo a través de los principales proveedores de servicios de correo electrónico ven una correlación materialmente mejor entre la tasa de entrada al buzón del panel y la tasa de entrada verdadera. No se conoce el mecanismo para esto, pero postulamos que los estándares de cumplimiento a los que los grandes proveedores de servicios mantienen a sus clientes generalmente resultan en tasas de entrada al buzón más consistentes a través de su audiencia y, por lo tanto, son menos propensas a sesgos. Podemos ver esto si restringimos nuestro gráfico solo a remitentes en los principales ESPs, lo cual también reduce el RMSE en aproximadamente un 30%.

Incluso cuando un pequeño número (10) de panelistas diarios ven el flujo de correo, vemos una correlación muy fuerte entre la tasa de entrada al buzón vista por el panel y la verdad fundamental.

Si consideramos solo los flujos donde 50 o más panelistas son vistos diariamente, la correlación se vuelve aún más estrecha.

Si miramos cómo varía esta tasa de error a lo largo del tiempo, vemos algunas cosas: 

  • Incluso con un número extremadamente pequeño de panelistas únicos recibiendo el correo, la tasa de error es inferior al 10%.

  • Rápidamente cae al 4% a medida que aumenta el número de panelistas.

  • Eventualmente se aproxima al 2% – mostrando que los datos del panel son un 98% precisos. 

Para los propósitos de identificar problemas de entregabilidad del flujo de correo, esta precisión es fantástica.

Entonces podrías preguntar: con un proveedor principal ofreciendo números de verdad fundamental, ¿cuál es la utilidad de tener datos de panel también, aunque esté altamente correlacionado? La mayoría de los proveedores de buzón – incluidos los titanes como Google y Microsoft – no ofrecen datos de colocación en bandeja de entrada, por lo que para los mensajes allí entregados, todavía necesitas una fuente como los datos de panel para entender las tasas de entrada al buzón. 

Y ahora todos podemos estar seguros de su precisión en esos casos.

Una de las preguntas que recibimos regularmente sobre nuestro Panel de Correo Electrónico con Permisos es cuán preciso es en términos de pronosticación de las tasas de entrada al buzón. Históricamente, esta ha sido una pregunta difícil de responder con autoridad ya que no había una fuente de verdad para medir en comparación, por lo que las opiniones (y la fe general en estadísticas de muestra) dominaban la discusión.

Ahora, sin embargo, con un proveedor de buzón principal licenciando datos de colocación de bandeja de entrada para su plataforma, es posible realizar un análisis real, que hicimos sobre unos 20,000 dominios de envío distintos de remitentes grandes y pequeños, tanto en nuestra plataforma de envío como en otros proveedores. 

Los resultados son emocionantes. El panel con permisos es altamente preciso, incluso con una señal relativamente baja, y se vuelve extremadamente preciso a medida que se aumenta el número de panelistas distintos vistos en un envío. Usando métodos estadísticos comunes, observamos el error cuadrático medio (RMSE – un análogo de la desviación estándar) entre la tasa de entrada al buzón vista en el proveedor principal y lo que ve nuestro panel.

En nuestro análisis, notamos que los remitentes que envían su correo a través de los principales proveedores de servicios de correo electrónico ven una correlación materialmente mejor entre la tasa de entrada al buzón del panel y la tasa de entrada verdadera. No se conoce el mecanismo para esto, pero postulamos que los estándares de cumplimiento a los que los grandes proveedores de servicios mantienen a sus clientes generalmente resultan en tasas de entrada al buzón más consistentes a través de su audiencia y, por lo tanto, son menos propensas a sesgos. Podemos ver esto si restringimos nuestro gráfico solo a remitentes en los principales ESPs, lo cual también reduce el RMSE en aproximadamente un 30%.

Incluso cuando un pequeño número (10) de panelistas diarios ven el flujo de correo, vemos una correlación muy fuerte entre la tasa de entrada al buzón vista por el panel y la verdad fundamental.

Si consideramos solo los flujos donde 50 o más panelistas son vistos diariamente, la correlación se vuelve aún más estrecha.

Si miramos cómo varía esta tasa de error a lo largo del tiempo, vemos algunas cosas: 

  • Incluso con un número extremadamente pequeño de panelistas únicos recibiendo el correo, la tasa de error es inferior al 10%.

  • Rápidamente cae al 4% a medida que aumenta el número de panelistas.

  • Eventualmente se aproxima al 2% – mostrando que los datos del panel son un 98% precisos. 

Para los propósitos de identificar problemas de entregabilidad del flujo de correo, esta precisión es fantástica.

Entonces podrías preguntar: con un proveedor principal ofreciendo números de verdad fundamental, ¿cuál es la utilidad de tener datos de panel también, aunque esté altamente correlacionado? La mayoría de los proveedores de buzón – incluidos los titanes como Google y Microsoft – no ofrecen datos de colocación en bandeja de entrada, por lo que para los mensajes allí entregados, todavía necesitas una fuente como los datos de panel para entender las tasas de entrada al buzón. 

Y ahora todos podemos estar seguros de su precisión en esos casos.

Otras noticias

Leer más de esta categoría

A person is standing at a desk while typing on a laptop.

La plataforma completa AI-native que escala con tu negocio.

© 2025 Bird

A person is standing at a desk while typing on a laptop.

La plataforma completa AI-native que escala con tu negocio.

© 2025 Bird