Twitter Membela Metrik Akun Palsu Setelah Pertanyaan Terbaru dari Elon Musk

Jadi, bagaimana pengambilalihan Twitter oleh Elon Musk?

Yah, tidak ideal.

Hari ini, sebagai tanggapan atas kritik publik dari Musk bahwa metodologi Twitter dalam menghitung spam dan akun palsu jelas salah, CEO Twitter saat ini Parag Agrawal men-tweet penjelasan panjang tentang proses deteksi dan penghapusan profil palsu perusahaan saat ini.

Selama seminggu terakhir, Musk telah mempertanyakan apakah estimasi Twitter bahwa 5% dari semua akun Twitter palsu mungkin benar, dan telah mengundang 90 juta+ pengikutnya untuk melakukan eksperimen dasar mereka sendiri untuk melihat apa yang mereka temukan.

Tentu saja, tes anekdot seperti ini sangat cacat, dan pada akhirnya tidak akan membuktikan apa-apa.

Tetapi seperti banyak aspek platform, Musk tampaknya belajar tentang proses ini secara real time, di tengah pengambilalihan $44 miliar, meskipun semua pertanyaannya diajukan dan dinilai, dalam berbagai bentuk, di masa lalu.

Jadi, dengan obrolan seputar elemen spesifik ini meningkat, Agrawal langsung menanggapi kritik Elon.

Pertama, Agrawal menjelaskan bahwa deteksi akun bot tidak mudah, dan kemungkinan besar tidak dapat dilakukan oleh pengguna biasa:

“ Kampanye spam paling canggih menggunakan kombinasi manusia + otomatisasi yang terkoordinasi. Mereka juga mengkompromikan akun nyata, dan kemudian menggunakannya untuk memajukan kampanye mereka. […] Tantangan terberatnya adalah banyak akun yang terlihat palsu secara dangkal, sebenarnya adalah akun orang sungguhan. Dan beberapa akun spam yang sebenarnya paling berbahaya – dan paling berbahaya bagi pengguna kami – dapat terlihat benar-benar sah di permukaan. Tim kami memperbarui sistem dan aturan kami secara terus-menerus untuk menghapus spam sebanyak mungkin, tanpa secara tidak sengaja menangguhkan orang sungguhan atau menambahkan gesekan yang tidak perlu untuk orang sungguhan saat mereka menggunakan Twitter: tak satu pun dari kami ingin memecahkan captcha setiap kali kami menggunakan Twitter. ”

Jadi menghitung secara acak akun yang Anda curigai palsu dalam daftar berikut Anda sendiri tidak akan akurat. Yang, sungguh, tampak jelas.

Perhatikan juga, referensi untuk melakukan proses verifikasi CAPTCHA setiap kali Anda menggunakan aplikasi adalah referensi langsung ke saran lain dari Musk.

“Setiap tinjauan manusia didasarkan pada aturan Twitter yang mendefinisikan spam dan manipulasi platform, dan menggunakan data publik dan pribadi (misalnya, alamat IP, nomor telepon, geolokasi, tanda tangan klien/browser, apa yang dilakukan akun saat aktif…) penentuan pada setiap akun. Penggunaan data pribadi sangat penting untuk menghindari kesalahan klasifikasi pengguna yang sebenarnya nyata. FirstnameBunchOfNumbers tanpa foto profil dan tweet aneh mungkin tampak seperti bot atau spam bagi Anda, tetapi di balik layar kita sering melihat banyak indikator bahwa itu adalah orang sungguhan.”

Dengan kata lain, ada banyak elemen yang digunakan untuk mendeteksi dan menentukan profil palsu dan spam, bukan hanya firasat, atau info akun yang membuat pengguna biasa menyipitkan mata. Twitter memiliki wawasan back-end untuk mendukung penyelidikannya, dan ini lebih mendalam daripada tes mata sederhana.

“Setiap kuartal, kami memperkirakan bahwa <5% dari mDAU yang dilaporkan untuk kuartal tersebut adalah akun spam. Perkiraan kami didasarkan pada beberapa tinjauan manusia (dalam ulangan) dari ribuan akun, yang diambil sampelnya secara acak, secara konsisten dari waktu ke waktu, dari akun yang kami hitung sebagai mDAU. Kami melakukan ini setiap kuartal, dan kami telah melakukan ini selama bertahun-tahun.”

Itu menarik, karena menurut Musk, Twitter hanya mengambil sampel 100 akun acak untuk angka ini.

Seperti yang Anda lihat, Musk kemudian mengklaim lebih lanjut bahwa Twitter menghubunginya karena melanggar ketentuan perjanjiannya tentang elemen ini - jadi Musk mengada-ada, atau Agrawal melebih-lebihkan proses Twitter.

Sekali lagi, tidak ada jalan mulus dalam dorongan pengambilalihan Elon.

Ringkasnya, Agrawal mengatakan bahwa, sebenarnya, berdasarkan laporan terbarunya, angka akun palsunya kurang dari 5%.

“Perkiraan internal kami yang sebenarnya untuk empat kuartal terakhir semuanya jauh di bawah 5% – berdasarkan metodologi yang diuraikan di atas. Margin kesalahan pada perkiraan kami memberi kami kepercayaan pada pernyataan publik kami setiap kuartal. Sayangnya, kami tidak percaya bahwa estimasi khusus ini dapat dilakukan secara eksternal, mengingat kebutuhan kritis untuk menggunakan informasi publik dan pribadi (yang tidak dapat kami bagikan). Secara eksternal, bahkan tidak mungkin untuk mengetahui akun mana yang dihitung sebagai mDAU pada hari tertentu. Ada BANYAK detail yang sangat penting di bawah deskripsi tingkat tinggi ini.”

Tanggapan Musk?

Benar. Sepertinya itu akan berjalan dengan baik - dan sekali lagi, sangat menarik untuk melihat intrik internal dari kesepakatan multi-miliar dolar turun ke salah tafsir, dan interpretasi teknis versus pandangan pribadi individu.

Paling-paling, bolak-balik harus memicu beberapa tingkat kekhawatiran atas kapasitas Musk untuk mengubah Twitter menjadi mesin penghasil uang, sesuai proyeksinya, mengingat bahwa ia tampaknya tidak dapat memahami bahkan beberapa metrik media sosial paling dasar.

Tetapi sekali lagi, banyak juga yang akan mengatakan bahwa Musk benar, bahwa tidak mungkin jumlah profil palsu Twitter begitu rendah, berdasarkan pengalaman pribadi mereka sendiri, tetapi juga, berdasarkan studi eksternal yang diterbitkan yang jelas-jelas menyarankan sebaliknya.

Memang, kembali pada tahun 2017, sebuah studi bersama yang dilakukan oleh para peneliti dari University of Southern California dan Indiana University menemukan bahwa sekitar 15% dari basis pengguna Twitter adalah bot daripada orang , sementara pada tahun 2018, Twitter menangguhkan atau menghapus lebih dari 70 juta akun. yang telah ditentukan adalah palsu. Pada saat itu, Twitter memiliki 330 juta pengguna aktif bulanan, yang menunjukkan bahwa sekitar 20% dari jumlah penggunanya bukanlah orang sungguhan.

Menanggapi pertukaran terbaru ini, SparkToro melakukan analisis baru terhadap 44.058 akun Twitter aktif dan menetapkan bahwa 19,42% 'sesuai dengan definisi konservatif akun palsu atau spam'.

Kuncinya mungkin terletak, kemudian, dalam elemen ini yang diidentifikasi dalam penjelasan Agrawal:

Apa sebenarnya mDAU menurut Twitter?

“ Kami mendefinisikan penggunaan atau pengguna aktif harian yang dapat dimonetisasi (mDAU) sebagai pengguna Twitter yang masuk atau dengan cara lain diautentikasi dan mengakses Twitter pada hari tertentu melalui Twitter.com atau aplikasi Twitter yang dapat menampilkan iklan .”

Jadi mungkin ada pengguna lain yang tidak termasuk dalam hitungan ini – mungkin mereka tidak aktif setiap hari sehingga mereka melewatkan penilaian, atau mereka tidak memenuhi syarat untuk ditampilkan iklan, karena logika sistem yang berbeda. Mungkin ada, karena parameter yang berbeda, beberapa penjelasan teknis yang akan membahas beberapa tingkat perbedaan antara temuan pihak ketiga ini dan data Twitter sendiri.

Tetapi meskipun demikian, hitungan 5% Twitter, secara seimbang, tampak seperti peregangan, dan pembengkokan kebenaran yang sebenarnya sehubungan dengan apa yang dialami orang-orang di aplikasi.

Dan seperti yang dikatakan Musk:

Yang, tentu saja, merupakan pertanyaan mendasar yang diajukan oleh setiap pengiklan dan setiap bisnis di kalangan pemasaran digital sejak awal media, jadi ini bukan terobosan baru, atau akan datang sebagai wawasan baru yang mengejutkan bagi mereka yang berada di sektor.

Tapi itu, tampaknya, berita yang cukup baru bagi Musk sendiri. Yang, sekali lagi, dapat menimbulkan pertanyaan tentang rencana pertumbuhan besar-besarannya untuk aplikasi.

Jadi apa yang terjadi sekarang? Bisakah Musk mundur dari kesepakatan Twitter jika, entah bagaimana, dia dapat membuktikan Agrawal salah, dan menunjukkan bahwa akun profil palsu Twitter sebenarnya jauh lebih tinggi daripada yang dikatakan?

Yah, mungkin tidak.

Musk, baik atau buruk, mengabaikan banyak tindakan uji tuntas dalam proposal pengambilalihan Twitter-nya untuk mendorong kesepakatan lebih cepat, yang berarti bahwa, seperti yang ada sekarang, dia cukup terkunci, dan itu akan memakan waktu yang signifikan. argumen hukum baginya untuk menjauh dari kesepakatan.

Sangat mungkin, dengan setidaknya beberapa preseden hukum, bahwa jika Musk dapat membuktikan secara definitif bahwa Twitter telah dengan sengaja menyesatkan SEC dalam laporan keuangan regulernya, melalui kesalahan pelaporan profil palsu, bahwa ia mungkin dapat keluar dari persyaratan ini, dengan argumen menjadi bahwa platform sama sekali tidak sepadan dengan apa yang diyakini, berdasarkan keuangannya. Tapi itu sepertinya berlebihan, terutama mengingat penjelasan Agrawal.

Mungkin, kemudian, Musk hanya mendorong untuk mengurangi harga penawarannya, untuk mendapatkan kesepakatan yang lebih baik.

Tidak 100% jelas apa hasil yang Musk cari, tetapi seperti yang ada sekarang, sepertinya Musk harus melalui kesepakatan Twitter, bahkan jika dia dan pengikutnya menganggap statistik ini salah.

Akankah kita mengetahui berapa jumlah profil palsu Twitter yang sebenarnya? Berdasarkan penjelasan Agrawal, itu juga tampaknya tidak mungkin, meskipun teknis di sini tampaknya penting, dalam menentukan apa yang dihitung, dan apa yang tidak, dalam statistik pengguna Twitter.

Either way, debat publik hanya bisa menjadi negatif bagi Twitter, baik dalam mengurangi kepercayaan pengiklan dalam metriknya, atau menyoroti masalah jangka panjang dengan sistemnya.

Apakah itu hal yang baik bagi Musk, pemilik masa depan platform, untuk mendorong di depan umum? Sepertinya pendekatan yang salah, terutama mengingat berbagai opsi lain yang akan dia miliki, dalam hal audit pribadi, berdiskusi dengan Twitter secara internal, memverifikasi melalui peneliti independen, dll.

Mungkin ini adalah bagaimana Musk berencana untuk melakukan sesuatu, tetapi itu bukan kisah awal yang menginspirasi untuk tahap selanjutnya dari aplikasi.