Apa dan mengapa VKontakte bereksperimen di umpan?

2024 Pengarang: Malcolm Clapton | [email protected]. Terakhir diubah: 2023-12-17 04:00

Bagaimana tes dan penelitian bekerja di tim jejaring sosial, apa yang sedang mereka kerjakan sekarang dan apa yang terjadi dengan sejenisnya.

Mari kita mulai dengan yang penting dan mencari tahu mengapa umpan berita diperlukan dan mengapa ada sesuatu yang berubah lagi di dalamnya. Di feed, kami berkomunikasi dengan teman dan berbagai penulis: pub hiburan, bisnis, media, blogger, media tematik. Umpan membantu untuk mengetahui berita, mengungkapkan pendapat, mendiskusikan acara, dan mengikuti semua yang terjadi saat ini.

Kami memiliki tugas yang sangat ambisius untuk pengembangan rekaman itu:

• membuat layanan yang ideal untuk komunikasi antara pembaca dan penulis;
• sorot yang paling penting di antara sejumlah besar informasi dan tampilkan berita dalam urutan yang benar;
• untuk membuat antarmuka yang nyaman dan cepat untuk melihat teks dan media, serta berkomunikasi di semua platform.

Ada dua sub-tugas utama: konten yang menarik dan antarmuka yang ramah pengguna.

Eksperimen dengan konten

Kami memiliki ratusan model dan rekomendasi smart feed berbeda yang berjalan secara paralel - tidak semua eksperimen terlihat oleh pengguna. Terkadang mereka berbeda dalam hal-hal kecil: kami menampilkan 1% lebih banyak konten dari teman daripada dari penerbit, dan melihat bagaimana hal ini memengaruhi penggunaan umpan berita. Terkadang tes lebih radikal: kami memberi peringkat konten situasional dan apa yang selalu relevan dengan cara yang berbeda secara fundamental. Ini sangat mengubah komposisi umpan untuk pembaca. Beberapa posting hanya relevan untuk beberapa jam (berita media, pengumuman, hasil olahraga), sementara posting lain mungkin menarik selama beberapa hari (ulasan, artikel, foto liburan).

Beberapa eksperimen dapat dievaluasi dalam beberapa hari - kemudian pembaruan diaktifkan dengan cepat untuk semua pengguna. Tes lain, di sisi lain, bisa memakan waktu lebih dari sebulan. Kebiasaan pengguna tidak berubah begitu cepat, dan penting bagi kami untuk mengevaluasi hasilnya dalam beberapa minggu.

Dalam produk yang kompleks, tidak mungkin untuk segera mengidentifikasi formula ideal, ini adalah jalur perbaikan berulang. Kami menguji ratusan hipotesis langkah demi langkah. Sebagai contoh:

• posting dengan banyak komentar lebih menarik;
• membaca posting untuk waktu yang lama adalah sinyal yang lebih penting daripada suka;
• posting yang ditambahkan ke bookmark semenarik mungkin;
• posting teks panjang dan teks pendek harus ditampilkan pada waktu yang berbeda dalam sehari untuk setiap pengguna;
• posting yang dikomentari oleh teman lebih menarik daripada yang lain.

Kami menguji semua hipotesis ini pertama-tama pada diri kami sendiri: kami menerapkan fitur baru dalam algoritme dan mulai menggunakannya sendiri. Jika kami suka, kami menyertakan pengguna di grup uji. Kami melihat metrik objektif, mengevaluasi signifikansi statistik eksperimen. Kami menarik kesimpulan: apakah kami meluncurkannya sama sekali, atau kami menyempurnakannya lebih lanjut. Dan selama beberapa tahun sejak peluncuran pita pintar. Ribuan hipotesis dan eksperimen berbeda. Sebagai hasil dari masing-masing, pemikiran dan asumsi baru muncul, masih ada banyak ide di depan.

Bekerja pada antarmuka

Tampaknya umpan berita tidak rumit dan tidak ada yang bisa ditemukan dalam hal antarmuka? Namun pada kenyataannya, ini juga merupakan pencarian kecantikan yang konstan.

Ini adalah bagaimana tampilan posting telah berubah selama beberapa tahun terakhir:

Pada saat yang sama, postingan dalam rekomendasi terlihat sangat berbeda. Mengapa? Ada pola konsumsi dan aksen yang sama sekali berbeda dalam hal persepsi. Di feed, kami berlangganan penulis tertentu, penting bagi kami yang menulis posting, kapan, apakah teman mendiskusikannya. Dan apakah mungkin untuk merespons dengan cepat, seperti, menulis komentar.

Dan dalam rekomendasi, kami tidak tahu penulisnya. Kemungkinan besar, konten itu penting bagi kami, jadi kami biasanya merepresentasikan postingan dengan cara yang berbeda:

Rekomendasi juga termasuk eksperimen. Kami menunjukkan penulis pos dengan cara yang berbeda, menempatkan tombol suka dalam mode ringkas umpan, dan seterusnya. Bahkan sekarang, di iOS dan Android, antarmukanya sedikit berbeda, karena eksperimen tidak berakhir di situ.

Kami melihat tugas apa yang paling sering diselesaikan pengguna di feed, dan mencoba membuat antarmuka ideal untuk tugas ini. Dan inilah yang sedang kami kerjakan sekarang.

1. Pita tanpa penghitung yang tidak perlu

Di umpan, Anda ingin membaca konten itu sendiri senyaman mungkin dan tidak terlalu terganggu oleh penghitung yang berbeda. Oleh karena itu, dalam rangka satu percobaan, kami tidak menunjukkan jumlah suka dan repost, kami hanya meninggalkan komentar. Ada hipotesis bahwa ini dapat secara positif memengaruhi keterlibatan dan jumlah aktivitas di umpan secara umum, dan seiring waktu membuat suka itu sendiri lebih bermakna.

Mengapa komentar ditinggalkan? Ini bukan hanya penghitung. Komentar juga konten, informasi yang melengkapi posting. Penghitung komentar membantu Anda mengetahui apakah perlu membuka layar pos terpisah untuk membaca diskusi. Terkadang mereka lebih menarik daripada publikasi itu sendiri.

Bagaimana kita akan mengevaluasi percobaan? Berdasarkan metrik objektif dan umpan balik pengguna. Terkadang kami menemui keluhan, yang tidak biasa, tetapi ada juga banyak ulasan positif, yang sangat nyaman ketika umpan lebih ringkas dan tidak ada informasi yang berlebihan yang tidak perlu. Tetapi antarmuka diluncurkan baru-baru ini, terlalu dini untuk mengevaluasi metrik produk yang objektif. Selalu ada periode untuk membiasakan diri di awal.

Kami berencana untuk memeriksa versi antarmuka lainnya, yang tidak memiliki penghitung, tetapi akan fokus pada konten. Jika metrik objektif menunjukkan peningkatan aktivitas di umpan (waktu, jumlah sesi, keterlibatan, dan sebagainya) dan umpan balik dari pembaca dan penulis agak positif, maka mungkin versi ini akan diluncurkan ke semua orang di beberapa titik.

2. Bookmark mudah

Ide lain yang saat ini sedang diuji adalah membawa tombol bookmark ke layar pita. Dalam berkomunikasi dengan pengguna, kami sering mendengar gagasan bahwa suka dapat digunakan sebagai cara untuk menyimpan kiriman "untuk nanti". Untuk ini, VKontakte memiliki alat yang lebih nyaman daripada seperti - layanan bookmark. Oleh karena itu, dalam percobaan, kami mengganti penghitung tampilan kiriman di umpan dengan tombol tambahkan ke bookmark. Tes ini telah diluncurkan, kami mengumpulkan opini dan metrik.

3. Tampilan postingan yang ringkas

Selain penghitung dan tombol aksi, kami telah berurusan dengan kekompakan posting selama beberapa waktu. Sayangnya, ada banyak contoh ketika rekaman kaset dapat mengambil dua atau tiga layar ponsel, yang secara objektif tidak nyaman. Oleh karena itu, kami meluncurkan eksperimen di mana kami menunjukkan tidak semua lampiran, tetapi hanya yang utama.

Pendekatan ini memiliki banyak keuntungan: pita menjadi menyenangkan secara visual dan lebih nyaman. Tapi itu sangat merusak sejumlah pola yang sudah dikenal. Misalnya, akan lebih mudah untuk mengambil survei dan dua foto untuk memilih yang terbaik. Dan jika untuk posting seperti itu Anda menyembunyikan foto dan hanya meninggalkan survei, maka semua kenyamanan hilang. Oleh karena itu, pengembangan eksperimen ini terus berlanjut.

4. Kecepatan kerja

Selain eksperimen yang terlihat secara visual, kami sekarang secara aktif mengerjakan tugas mempercepat pengoperasian antarmuka itu sendiri. Kita berbicara tentang kecepatan memuat umpan, konten media, membuka layar dengan komentar.

Server kami memproses puluhan ribu permintaan kaset per detik. Oleh karena itu, pemuatan feed yang cepat dan bagian rekomendasi membutuhkan kreativitas dan upaya yang tidak kalah dari antarmuka yang ideal dalam hal pengaturan elemen. Untuk meningkatkan rencana seperti itu, kami memiliki tim terpisah yang membuat database khusus yang dioptimalkan secara maksimal untuk tugas-tugas kami.

Selain itu, kami akan menerapkan logika cerdas caching informasi multi-tahap. Ini termasuk cache pada klien seluler - untuk unduhan instan data yang diterima di sesi sebelumnya. Dan juga - berbagai cache di server, yang memungkinkan Anda melakukan banyak perhitungan terlebih dahulu.

5. Komentar yang nyaman

Banyak yang berubah dalam komentar selama setahun terakhir. Kami membuatnya dua tingkat - ini sangat kurang. Tapi masih ada rencana besar perbaikan yang jelas di depan.

Diskusi dengan puluhan utas berbeda dan ratusan peserta dalam percakapan sudah sulit dilihat dari telepon. Belum lama ini, kami meluncurkan peringkat utas komentar yang nyaman: Anda dapat melihat yang paling menarik atau yang terbaru. Tapi secara umum, kami masih di awal jalan. Rencananya adalah untuk secara signifikan meningkatkan algoritme untuk mengidentifikasi komentar yang menarik dan menampilkannya di atas, untuk menerapkan pembaruan dan menerima komentar dan tanggapan secara real time. Selain itu, untuk membuat antarmuka senyaman mungkin untuk komunikasi dalam format seperti dialog, dan untuk mengimplementasikan notifikasi dan antarmuka yang akan mengikuti diskusi paling menarik bagi pengguna.

Kesimpulan

Iblis ada dalam detailnya. Kami banyak bekerja pada liputan, format berbeda, peluang monetisasi, dan banyak lagi untuk membuat sistem konten senyaman mungkin bagi penulis dan pembaca. Tetapi pada saat yang sama, kami percaya bahwa sejalan dengan keseluruhan strategi dan peluncuran fundamental, sangat penting untuk bekerja melalui semua detail terkecil dari umpan berita dan rekomendasi. Harapkan lebih banyak eksperimen dan pembaruan.