Gmail Melakukan Prefetching Gambar, Mengakibatkan Peningkatan Pembukaan yang Tidak Signifikan

The recent changes with Perlindungan Privasi Apple Mail had us wondering – where else is prefetching happening? While false opens come as no huge surprise, we have additional details around the limited set of circumstances in which Gmail is prefetching images in emails sent to Gmail users. 

Pembukaan prefetch Gmail terjadi dalam kondisi berikut ini:

1. Penerima Gmail telah masuk ke dalam dan memiliki sesi aktif yang terbuka pada aplikasi Gmail (baik aplikasi web maupun aplikasi seluler).

2. Email dikirim ke penerima Gmail saat sesi mereka aktif/terbuka.

3. Gmail mengambil semua gambar segera sebelum UI menampilkan email.

4. This image prefetch is in addition to (and different from) Cache Gambar Google opens, which occurs when the user opens the email.

The image prefetch only occurs when the user is logged into the Gmail application, comes from a Google IP address, and is requested using the following user-agent string:

Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, seperti Gecko) Chrome/42.0.2311.135 Safari/537.36 Edge/12.246 Mozilla/5.0

Dalam menyelidiki miliaran kejadian terbuka, kami dapat dengan yakin mengatakan bahwa kejadian terbuka ini adalah kejadian terbuka palsu dan tidak mengindikasikan kejadian terbuka pengguna yang sebenarnya. Kejadian terbuka ini independen dan berbeda dari kejadian terbuka yang diprakarsai pengguna yang dipicu oleh Google Image Cache.

Dampak Prapemesanan Gmail

What are the implications of the false opens at Gmail? Thankfully, they are minor and nowhere near the Apple Mail Privasi Protection scale. 

In looking at over 9.8B Gmail recipient open events in December 2021, for most senders, we saw that false opens accounted for between 1-6% of open events. What this means is your open rate may be inflated by up to 2 percentage points. For example: If you currently have an overall open rate of 20% at Gmail, your correct open rate would be closer to 18%.  

Your specific false open rate may be significantly higher or lower than what we are reporting above. Because, the false opens are triggered based upon when users are using the Gmail application, your specific audience’s behavior and use-cases are the primary factors in how much you will be impacted by this anomaly.  

Cara Mendeteksi dan Mengabaikan Pembukaan Gmail yang Sudah Dibuka Sebelumnya

For SparkPost senders, we have you covered. We have already updated our events API and event webhooks to automatically identify these Gmail Prefetch events using the baru diperkenalkan is_prefetched bendera. We are also actively working to add the ability to distinguish prefetched and proxy opens in our Analytics Report UI and Metrics API. Stay tuned for future updates regarding the Report UI enhancements.

Bagi yang lain, mendeteksi pembukaan prefetch Gmail masih relatif mudah. Untuk setiap kejadian terbuka, Anda sebaiknya mengabaikan (atau menandai secara unik) setiap kejadian terbuka yang cocok dengan string agen pengguna berikut ini:

Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, seperti Gecko) Chrome/42.0.2311.135 Safari/537.36 Edge/12.246 Mozilla/5.0

We have been able to confirm that this string is unique to Google’s Prefetch Bot. 

Analisis Detail Prapemesanan Gmail

As detailed above, Gmail prefetching only occurs in a limited set of circumstances. Prefetching does not occur with other mail clients. Instead, this behavior is specific to when a Gmail user has the Gmail app open within their web browser or is actively using the mobile app. Our best guess is that it’s a security scan before showing the email ke user in their browser.

Tajuk permintaan lengkap untuk permintaan gambar dirinci di bawah ini. Beberapa hal yang akan Anda perhatikan:

• The referer is set to http://mail.google.com. Interestingly, even though the user is on https://, Gmail still sets the referer ke http:// protocol when making the request. 

• Permintaan berasal dari server Gmail dan bukan dari browser pengguna. IP klien selalu diselesaikan ke ruang IP milik Google.

• Tidak seperti Cache Gambar Google, string agen-pengguna tidak mengidentifikasi bahwa permintaan berasal dari salah satu bot Google. Sebaliknya, string agen-pengguna terlihat seperti permintaan gambar pengguna yang sebenarnya. Namun, kami telah mengonfirmasi bahwa string agen-pengguna ini memang mengidentifikasi bot prefetch Google.

• Permintaan terbuka terjadi dalam hitungan detik setelah pengiriman email. Selanjutnya, permintaan tersebut terjadi sebelum email muncul di antarmuka Gmail pengguna. Perilaku ini membuat kami percaya bahwa permintaan tersebut untuk tujuan keamanan.

• Prefetch tampaknya hanya terjadi sekali untuk setiap utas email Gmail yang belum dibaca. Dalam pengujian ekstensif kami, setelah sebuah pesan dibaca oleh pengguna, email berikutnya yang masuk ke grup utas tersebut tidak akan memulai permintaan prefetch.

• Pengambilan gambar ini terpisah dari Cache Gambar Google. Pengujian kami menunjukkan bahwa bahkan setelah gambar diambil sebelumnya, permintaan Cache Gambar Google yang terpisah dibuat ketika pengguna membuka email.

• Jika pengguna membuka aplikasi seluler Gmail, prefetch akan terus terjadi dalam waktu singkat, bahkan setelah menutup aplikasi seluler.

Berikut ini adalah contoh tampilan header permintaan saat gambar diminta dari Google Prefetch Bot:

  headers: {

    host: ‘{redacted}.m.pipedream.net’,

    ‘x-amzn-trace-id’: ‘Root={redacted}’,

    ‘accept-language’: ‘en-US’,

    referer: ‘http://mail.google.com/’,

    accept: ‘image/avif,image/webp,image/apng,image/svg+xml,image/*,*/*;q=0.8’,

    from: ”,

    ‘user-agent’: ‘Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, seperti Gecko) Chrome/42.0.2311.135 Safari/537.36 Edge/12.246 Mozilla/5.0’,

    ‘accept-encoding’: ‘gzip, deflate, br’

   },

   body: {},

   inferred_body_type: ‘FORM’,

   method: ‘GET’,

   url: ‘https://{redacted}.m.pipedream.net/header-1641a1.gif’,

   client_ip: ‘66.249.92.1’,

   query: {}

Seperti halnya dengan Perlindungan Privasi Email Apple, pengirim harus memperlakukan semua kejadian terbuka dengan hati-hati. Keterbukaan hanyalah salah satu, dan sering kali bukan yang terbaik, dari sekian banyak metrik keterlibatan yang harus dipantau oleh pengirim dan disertakan saat menentukan keterlibatan pengguna.