Pengujian alpha vs beta: perbedaan dan kapan dipakai
6 menit baca
Pengujian alpha adalah putaran pengujian pertama, dilakukan di dalam perusahaan pada build yang masih kekurangan bagian dan diketahui belum stabil. Pengujian beta menyusul: build yang fiturnya lengkap, atau hampir lengkap, diberikan kepada pengguna sungguhan di luar tim. Mereka memakainya di lingkungan masing-masing dan melaporkan apa yang rusak atau membingungkan. Alpha menjawab apakah perangkat lunak berfungsi sama sekali. Beta menjawab apakah perangkat lunak berfungsi bagi orang yang dituju, di mesin mereka, dengan data dan kebiasaan mereka.
| Pengujian alpha | Pengujian beta | |
|---|---|---|
| Siapa yang menguji | Developer, QA, staf lain | Pelanggan dan relawan di luar perusahaan |
| Kondisi build | Fitur masih ditambahkan, banyak bug yang diketahui | Fitur lengkap atau hampir lengkap, bug diperkirakan ada |
| Lingkungan | Lab, staging, atau akun milik tim sendiri | Perangkat, data, dan alur kerja sungguhan |
| Pertanyaan utama | Apakah berfungsi sesuai desain? | Apakah berfungsi bagi pengguna sungguhan? |
| Umpan balik khas | Laporan bug yang presisi beserta langkah | Gejala, kebingungan, fitur yang kurang |
| Apa yang mengakhirinya | Build sudah lengkap dan cukup stabil untuk ditunjukkan ke pihak luar | Tidak ada blocker tersisa dan umpan balik sudah melambat |
Apa itu pengujian alpha?
Pengujian alpha adalah pengujian internal pada build awal. Orang yang menguji mengenal produknya, bisa membaca log, dan paham bahwa banyak hal akan rusak, jadi tujuannya menemukan masalah besar sebelum ada orang luar yang melihatnya.
Artikel Wikipedia tentang siklus hidup rilis perangkat lunak menggambarkan fase alpha sebagai fase pertama pengujian perangkat lunak: developer menguji dengan teknik white-box, lalu tim penguji terpisah memvalidasi build dengan teknik black-box atau gray-box. Banyak tim menambahkan lapisan ketiga, yaitu staf yang memakai produk untuk pekerjaan mereka sendiri. Praktik itu punya nama sendiri, dogfooding, dan ia menemukan hambatan yang tidak pernah tersentuh tes terskrip.
Apa itu pengujian beta?
Pengujian beta menempatkan build yang hampir selesai di hadapan pengguna sungguhan sebelum rilis umum. Ia menangkap masalah yang hanya muncul di luar gedung: perangkat dan browser lain, data yang berantakan, alur kerja tak biasa, dan orang yang belum pernah melihat bagian dalam produk.
Artikel Wikipedia yang sama menyebut bahwa fase beta umumnya dimulai ketika perangkat lunak sudah lengkap fiturnya tetapi kemungkinan masih berisi bug yang diketahui maupun belum diketahui. Beta tertutup mengundang kelompok terpilih, sering kali pelanggan yang meminta fiturnya atau mitra desain. Beta terbuka membiarkan siapa pun bergabung. Beberapa produk tetap berada dalam apa yang disebut perpetual beta, diperbarui terus-menerus dan tak pernah dinyatakan selesai.
Apa perbedaan pengujian alpha dan beta?
Empat hal berubah antara kedua fase: siapa yang menguji, seberapa jadi build-nya, di mana ia berjalan, dan apa yang terjadi pada sebuah laporan. Penguji alpha adalah orang dalam yang bekerja dengan build yang belum lengkap di lingkungan terkendali, sedangkan penguji beta adalah orang luar yang memakai build lengkap untuk pekerjaan nyata.
Perbedaan terakhir paling penting bagi orang yang membaca laporan. Laporan alpha biasanya datang dari seseorang yang paham kodenya, menyebut komponennya, dan menyertakan langkah. Laporan beta datang dari seseorang yang melihat sebuah gejala, dan satu akar masalah yang sama bisa tiba sebagai lima keluhan berbeda. Karena itu umpan balik beta perlu ditriase sebelum sampai ke developer: memisahkan bug dari permintaan, menggabungkan duplikat, dan mengajukan pertanyaan lanjutan selagi penguji masih ingat apa yang mereka lakukan.
Sebaiknya menjalankan beta tertutup atau terbuka?
Mulailah dengan yang tertutup, dan buka beta hanya ketika Anda membutuhkan skala atau keragaman yang tidak bisa direkrut secara manual. Kelompok tertutup lebih mudah didukung dan lebih kecil kemungkinannya membocorkan fitur yang belum selesai.
Toko aplikasi membangun urutan ini ke dalam perangkatnya. Google Play menawarkan tiga jalur pengujian: pengujian internal untuk hingga 100 penguji, pengujian tertutup untuk kelompok undangan yang lebih luas, dan pengujian terbuka yang bisa diikuti siapa pun. Akun developer pribadi baru yang dibuat setelah 13 November 2023 wajib menjalankan pengujian tertutup dengan minimal 12 penguji, yang ikut serta terus-menerus selama minimal 14 hari, sebelum bisa mengajukan akses produksi. TestFlight milik Apple mengizinkan hingga 100 penguji internal dari tim pengembangan dan hingga 10.000 penguji eksternal, dan build pertama yang dikirim ke penguji eksternal harus disetujui App Review. Ketiga angka itu diperiksa pada 16 Oktober 2026.
Bagaimana memberi versi pada build alpha dan beta?
Beri setiap build versi yang menyatakan tahapnya dan terurut sesuai urutan rilis. Sufiks pra-rilis melakukan keduanya.
Semantic Versioning menandai pra-rilis dengan tanda hubung dan pengenal yang dipisahkan titik setelah versi yang sedang dituju. Contoh urutan dalam spesifikasinya sendiri adalah 1.0.0-alpha < 1.0.0-alpha.1 < 1.0.0-alpha.beta < 1.0.0-beta < 1.0.0-beta.2 < 1.0.0-beta.11 < 1.0.0-rc.1 < 1.0.0, sehingga tahap-tahapnya terurut benar tanpa penanganan khusus. Beri tag tiap build di git seperti dijelaskan di tag git dan rilis, dan ketika beta berakhir, tahap berikutnya adalah release candidate.
Bagaimana mengumpulkan dan mentriase umpan balik beta?
Beri penguji satu tempat yang jelas untuk melapor, di dalam produk jika bisa, dan tanyakan apa yang mereka lakukan, apa yang mereka harapkan, dan apa yang terjadi. Lalu pilah setiap laporan menjadi bug, permintaan fitur, atau pertanyaan, gabungkan duplikat, dan balas penguji.
Utas email dan kanal chat terasa ramah di awal beta dan menjadi tak bisa dicari dalam seminggu. Formulir atau widget di dalam produk menangkap halaman, versi, dan akun tanpa meminta penguji mengetikkannya. Perbedaan antara permintaan fitur dan laporan bug layak dibuat saat penerimaan, karena keduanya menuju pemilik yang berbeda, dan permintaan fitur duplikat perlu digabungkan dengan jumlahnya tetap tercatat, sebab sepuluh penguji yang meminta hal yang sama sudah merupakan temuan tersendiri. Di Changeloop, laporan yang dikirim lewat widget umpan balik menjadi issue GitHub dengan label bug atau feature-request, ditambah label prioritas dan from-widget, sehingga umpan balik beta masuk ke pelacak yang sama dengan pekerjaan yang dibicarakannya.
Kapan pengujian beta selesai?
Beta selesai ketika masalah yang tersisa sudah diketahui, tak satu pun menghalangi rilis, dan laporan baru sudah menyusut menjadi tetesan. Tuliskan kriteria keluar sebelum beta dimulai, atau beta cenderung berakhir pada tanggal yang dijanjikan seseorang kepada pelanggan.
Satu set kriteria keluar yang bisa dipakai:
- Tidak ada bug terbuka yang dinilai sebagai blocker.
- Tingkat crash dan error berada pada atau di bawah level yang Anda tetapkan untuk rilis.
- Laporan baru per hari sudah turun, dan sebagian besar mengulang masalah yang diketahui.
- Perubahan yang paling banyak diminta sudah dikerjakan atau secara eksplisit ditunda, dan penguji diberi tahu yang mana.
- Dokumentasi dukungan dan release notes disusun dari hal-hal yang benar-benar menyulitkan penguji.
Ketika semuanya terpenuhi, bekukan fitur dan buat release candidate pertama. Bug yang ditemukan sejak itu hanya diperbaiki jika menghalangi rilis.
Bagaimana menutup lingkaran dengan penguji beta?
Beri tahu penguji apa yang terjadi pada hal yang mereka laporkan, di kanal yang sama dengan yang mereka pakai untuk melapor. Orang yang melihat umpan baliknya berubah menjadi perbaikan akan terus menguji, dan orang yang tak mendengar apa-apa akan berhenti.
Kirim catatan singkat bersama setiap build beta baru yang mencantumkan perbaikan yang berasal dari laporan penguji, dan katakan terus terang permintaan mana yang tidak akan masuk rilis. Ketika versi final dirilis, release notes sebaiknya mengakui perubahan yang didorong penguji; template release notes memberi struktur untuk itu. Changeloop melakukannya per laporan: ketika entri changelog yang tertaut ke issue widget disetujui, issue tersebut menerima satu komentar yang menyatakan perubahan sudah dirilis, beserta tautan ke entri di changelog publik. Praktik yang lebih luas dibahas di menutup lingkaran umpan balik pelanggan.
FAQ
Apakah pengujian beta sama dengan user acceptance testing? Keduanya tumpang tindih, tetapi menjawab pertanyaan berbeda. User acceptance testing memeriksa perangkat lunak terhadap persyaratan yang disepakati, biasanya oleh pelanggan atau pemilik bisnis sebelum disetujui, sedangkan pengujian beta mengamati bagaimana kelompok yang lebih luas memakai produk dalam praktik.
Bisakah tim kecil melewati pengujian alpha? Bisa dipersingkat, tetapi melewatinya sama sekali berisiko. Bahkan beberapa hari tim memakai build untuk pekerjaan nyata, sebelum ada orang luar yang melihatnya, menghilangkan crash dan alur rusak yang kalau tidak akan menyia-nyiakan kesan pertama para penguji.
Apa yang datang setelah pengujian beta? Release candidate, lalu general availability. Kandidat itu adalah build dengan fitur beku yang dirilis tanpa perubahan kecuali pengujian menemukan blocker, dan rilis final adalah build yang sama dengan label baru.
Berapa banyak penguji beta yang dibutuhkan? Cukup untuk mencakup platform, jenis akun, dan alur kerja utama yang didukung produk. Beberapa toko juga menetapkan batas bawah, seperti pengujian tertutup dengan 12 penguji selama 14 hari yang diwajibkan Google Play bagi akun developer pribadi baru.
Klaim teknis dalam artikel ini belum ditinjau secara independen. Jika ada yang keliru, beri tahu kami dan kami akan memperbaikinya.