
Activision Blizzard telah menerbitkan sebuah makalah putih panjang yang menjelaskan apa yang terjadi ketika mereka menurunkan pemadanan berdasarkan kebolehan (SBMM) dalam Panggilan Kewajiban. Versi TL:DR? Hampir semua orang membencinya.
Perusahaan ini ingin mengeksplorasi bagaimana SBMM memengaruhi para pemain dalam berbagai cara, yang mengarah pada mereka menjalankan 'Ujian Mengabaikan Kebolehan' di Panggilan Kewajiban: Peperangan Modern III awal tahun ini.
Eksperimen ini melibatkan studio tersebut memanfaatkan kerangka kerja uji A/B untuk mengendurkan batasan kebolehan dalam pemadanan. Mereka menjalankan uji coba tahun 2024 di Amerika Utara dan membentuk kelompok perlakuan yang terdiri dari 50 persen populasi. Separate dari pemain lain tidak terkena dampaknya.
Tingkat pemain kembali menurun ketika pemadanan berdasarkan kebolehan dilepaskan
Mereka yang tanpa sadar mengalami penurunan SBMM tidak senang. Setelah sebulan menjalankan uji coba, Activision mengategorikan populasi perlakuan ke dalam 10 kelompok yang sama besar—diurutkan berdasarkan kebolehan. Dengan SBMM diabaikan, tingkat pemain yang kembali menurun secara signifikan untuk 90 persen pemain. Hanya 10 persen pemain paling terampil yang kembali dalam jumlah yang meningkat, tetapi secara keseluruhan Activision Blizzard melihat "meaningly lebih sedikit pemain yang kembali ke permainan."
"Efek ini mungkin terlihat kecil, tetapi perubahan ini dapat diamati selama durasi uji coba. Ini akan bertambah seiring waktu, sama seperti bunga, dan akan memiliki dampak signifikan pada populasi pemain kami. Ini merupakan kekhawatiran bagi semua pemain, termasuk 10 persen teratas, karena jika pola ini diperbolehkan terus, pemain akan keluar dari permainan dalam jumlah yang meningkat," jelas perusahaan tersebut.
"Pada akhirnya, seorang pemain 10 persen teratas akan menjadi pemain 20 persen teratas, dan akhirnya pemain 30 persen teratas, sampai akhirnya hanya pemain terbaik yang akan tetap bermain permainan. Pemain asli teratas tersebut akan semakin mungkin untuk tidak kembali bermain permainan. Pada akhirnya, ini akan menghasilkan pengalaman yang lebih buruk bagi semua pemain, karena akan ada semakin sedikit pemain yang tersedia untuk bermain bersama. Juga, seperti yang dicatat di atas, uji ini hanya mengabaikan kebolehan dalam aturan pencocokan. Jika itu benar-benar dihapus kami akan mengharapkan populasi pemain mengalami erosi dengan cepat dalam waktu beberapa bulan."
Pemain yang terdampak oleh Ujian Mengabaikan Kebolehan juga lebih mungkin melompat keluar dari permainan, dengan Activision Blizzard menjelaskan tingkat keluar "signifikan" meningkat di 80 persen pemain. Hanya 10 persen pemain teratas yang melihat penurunan tingkat keluar yang signifikan, tetapi Activision Blizzard mencatat bahwa keuntungan tersebut akan singkat.
"Saat kepergian pemain di kategori keahlian yang lebih rendah dipercepat, pemain 10 persen teratas akhirnya akan turun dalam distribusi keahlian (karena awalnya pemain 10 persen teratas akan menjadi bagian yang lebih besar dari basis pemain)," katanya. "Akibatnya, kami mengharapkan pemain teratas 10 persen keluar dari permainan dengan tingkat yang semakin meningkat saat mereka menjadi pemain persentil ke-50 setelah sebagian besar populasi keahlian rendah telah meninggalkan permainan."
Pertandingan Team Death Match melihat lebih banyak kemenangan telak
Jumlah 'Kemenangan Telak' dalam Team Death Match (TDM) juga meningkat. Activision Blizzard menjelaskan bahwa kemenangan telak terjadi ketika satu tim dalam sebuah lobby 'menang dengan selisih skor lebih besar dari 30,' yang berarti mereka benar-benar menghancurkan lawan mereka. Mereka mengatakan jumlah kemenangan telak meningkat untuk semua pemain Ujian Mengabaikan Kebolehan di lobi TDM, yang berarti semua orang kemungkinan memiliki lebih sedikit kesenangan. "Kita melihat hasil yang serupa dalam mode permainan lainnya," tambah mereka.
Melacak metrik lain seperti Pembunuhan Per Menit (KPM) dan Skor Per Menit (SPM) di sepanjang lobi yang terdampak oleh eksperimen menunjukkan bahwa pemain yang kurang terampil secara umum tampil lebih buruk, sementara 10 persen teratas mampu 'mendominasi'.
"Pembunuhan Per Menit menurun secara signifikan untuk 20-30 persen bawah pemain. 60 persen pemain berikutnya tidak mengalami perubahan signifikan, dan 10 persen teratas melihat KPM yang jauh lebih tinggi," demikian keterangan Activision Blizzard. "Seperti KPM, SPM mengikuti tren yang sama. Pemain berkeahlian rendah tampil lebih buruk, sementara 10 persen teratas dapat mendominasi. Seperti halnya dengan KPM, kami mengharapkan pemain berpindah ke kiri pada distribusi ini dari waktu ke waktu, karena pemain berkeahlian rendah kembali ke permainan dengan tingkat yang lebih rendah.
"Penggunaan killstreaks dan peningkatan KPM dan SPM menunjukkan bahwa disparitas persentil keahlian lobi yang lebih luas secara tidak proporsional dimanfaatkan oleh 10 persen teratas pemain. Sayangnya, peningkatan kinerja ini datang dengan biaya dampak yang lebih besar pada 30 persen yang jauh lebih besar dari populasi keahlian bawah."
Menimbang lebih luas, Activision Blizzard mengatakan uji coba terbarunya dan eksperimen sejarah menunjukkan hubungan yang jelas antara SBMM dan retensi pemain.
"Kita dapat melihat bahwa mengendurkan keahlian secara negatif mempengaruhi kemampuan kami untuk membuat pemain tertarik dengan permainan kami," kata mereka. "Dalam uji coba yang mirip dengan Ujian Mengabaikan Kebolehan yang dibahas di atas, kami dapat melihat penurunan signifikan dalam jumlah pemain yang bermain Panggilan Kewajiban: Peperangan Modern (2019) dan peningkatan tingkat keluar keseluruhan permainan, saat ditangani dengan pemadanan keahlian yang lebih longgar. Upaya selanjutnya untuk melindungi hanya 25 persen bawah pemain dan memungkinkan pemadanan yang lebih longgar untuk 75 persen pemain lainnya juga menunjukkan indikator negatif yang jelas dari 'kesenangan' yang dilaporkan sendiri."
Anda dapat membaca makalah putih lengkap di situs web Activision Blizzard.