Testy alfa i beta: różnice i kiedy uruchomić każdy
6 min czytania
Testy alfa to pierwsza runda testowania, prowadzona wewnątrz firmy na buildzie, któremu wciąż czegoś brakuje i o którym wiadomo, że jest niestabilny. Testy beta następują potem: build kompletny pod względem funkcji, albo prawie, trafia do prawdziwych użytkowników spoza zespołu, którzy używają go we własnych środowiskach i zgłaszają, co się psuje lub co ich myli. Alfa odpowiada na pytanie, czy oprogramowanie w ogóle działa. Beta odpowiada na pytanie, czy działa dla ludzi, dla których je zbudowano: na ich komputerach, z ich danymi i według ich nawyków.
| Testy alfa | Testy beta | |
|---|---|---|
| Kto testuje | Programiści, QA, inni pracownicy | Klienci i ochotnicy spoza firmy |
| Stan builda | Funkcje wciąż powstają, wiele znanych błędów | Funkcje kompletne lub prawie, błędy oczekiwane |
| Środowisko | Laboratorium, staging lub konta zespołu | Prawdziwe urządzenia, dane i przepływy pracy |
| Główne pytanie | Czy działa zgodnie z projektem? | Czy działa dla prawdziwych użytkowników? |
| Typowe zgłoszenia | Precyzyjne zgłoszenia błędów z krokami | Objawy, dezorientacja, brakujące funkcje |
| Co kończy etap | Build jest kompletny i dość stabilny, by pokazać go osobom z zewnątrz | Nie ma blokerów, a napływ zgłoszeń osłabł |
Czym są testy alfa?
Testy alfa to wewnętrzne testowanie wczesnego builda. Osoby, które go testują, znają produkt, potrafią czytać logi i godzą się z tym, że coś się zepsuje, więc celem jest znalezienie dużych problemów, zanim zobaczy je ktokolwiek z zewnątrz.
Artykuł Wikipedii o cyklu życia wydań oprogramowania opisuje fazę alfa jako pierwszą fazę testowania oprogramowania: programiści testują technikami białoskrzynkowymi, a osobny zespół testowy sprawdza następnie build technikami czarno- lub szaroskrzynkowymi. Wiele zespołów dodaje trzecią warstwę, czyli pracowników używających produktu w codziennej pracy. Ta praktyka ma własną nazwę, dogfooding, i wyłapuje tarcia, których żaden skryptowy test nie dotyka.
Czym są testy beta?
Testy beta stawiają prawie gotowy build przed prawdziwymi użytkownikami jeszcze przed wydaniem ogólnym. Wyłapują problemy, które widać dopiero poza firmą: inne urządzenia i przeglądarki, nieuporządkowane dane, nietypowe przepływy pracy i ludzi, którzy nigdy nie widzieli wnętrza produktu.
Ten sam artykuł Wikipedii mówi, że faza beta zwykle zaczyna się, gdy oprogramowanie jest kompletne pod względem funkcji, ale prawdopodobnie zawiera znane lub nieznane błędy. Beta zamknięta zaprasza wybraną grupę, często klientów, którzy prosili o daną funkcję, lub partnerów projektowych. Beta otwarta pozwala dołączyć każdemu. Niektóre produkty pozostają w tzw. wiecznej becie, aktualizowane w sposób ciągły i nigdy nieogłaszane jako skończone.
Czym różnią się testy alfa i beta?
Między obiema fazami zmieniają się cztery rzeczy: kto testuje, jak gotowy jest build, gdzie działa i co dzieje się ze zgłoszeniem. Testerzy alfa to osoby z wewnątrz, pracujące na niekompletnym buildzie w kontrolowanych warunkach, a testerzy bety to osoby z zewnątrz, używające kompletnego builda do prawdziwej pracy.
Ostatnia różnica jest najważniejsza dla osób, które czytają zgłoszenia. Zgłoszenie z alfy zwykle pochodzi od kogoś, kto zna kod, wskazuje komponent i podaje kroki. Zgłoszenie z bety pochodzi od kogoś, kto zobaczył objaw, a ta sama przyczyna może dotrzeć jako pięć różnych skarg. Opinie z bety wymagają więc triażu, zanim trafią do programistów: oddzielenia błędów od próśb, scalenia duplikatów i dopytania, póki tester jeszcze pamięta, co zrobił.
Czy prowadzić betę zamkniętą, czy otwartą?
Zacznij od zamkniętej, a otwórz ją dopiero wtedy, gdy potrzebujesz skali lub różnorodności, której nie da się zrekrutować ręcznie. Zamkniętą grupę łatwiej obsługiwać i mniej prawdopodobne, że wycieknie niedokończona funkcja.
Sklepy z aplikacjami wbudowały tę kolejność w swoje narzędzia. Google Play oferuje trzy ścieżki testowania: testy wewnętrzne dla maksymalnie 100 testerów, testy zamknięte dla szerszej zaproszonej grupy i testy otwarte, do których może dołączyć każdy. Nowe osobiste konta deweloperskie utworzone po 13 listopada 2023 r. muszą przeprowadzić test zamknięty z co najmniej 12 testerami, którzy pozostają zapisani nieprzerwanie przez co najmniej 14 dni, zanim będą mogły ubiegać się o dostęp produkcyjny. TestFlight Apple pozwala na maksymalnie 100 testerów wewnętrznych z zespołu deweloperskiego i do 10 000 testerów zewnętrznych, a pierwszy build wysłany testerom zewnętrznym musi zostać zatwierdzony przez App Review. Wszystkie trzy wartości sprawdzono 16 października 2026 r.
Jak wersjonować buildy alfa i beta?
Nadaj każdemu buildowi wersję, która mówi, do jakiego etapu należy, i sortuje się w kolejności wydań. Oba te cele spełniają sufiksy wersji wstępnej.
Semantic Versioning oznacza wersję wstępną myślnikiem i identyfikatorami rozdzielonymi kropkami po wersji, do której zmierzasz. Przykład pierwszeństwa z samej specyfikacji wygląda tak: 1.0.0-alpha < 1.0.0-alpha.1 < 1.0.0-alpha.beta < 1.0.0-beta < 1.0.0-beta.2 < 1.0.0-beta.11 < 1.0.0-rc.1 < 1.0.0, więc etapy sortują się poprawnie bez żadnej specjalnej obsługi. Otaguj każdy build w git, jak opisano w tekście tagi git i wydania, a gdy beta się skończy, kolejnym etapem jest release candidate.
Jak zbierać i porządkować opinie z bety?
Daj testerom jedno oczywiste miejsce do zgłaszania, najlepiej wewnątrz produktu, i poproś o to, co zrobili, czego się spodziewali i co się stało. Potem posortuj każde zgłoszenie na błąd, prośbę o funkcję lub pytanie, scal duplikaty i odpowiedz testerowi.
Wątki mailowe i kanały czatu wydają się przyjazne na początku bety, a po tygodniu nie da się w nich niczego znaleźć. Formularz lub widżet w produkcie zapisuje stronę, wersję i konto bez proszenia testera, by to wpisywał. Rozróżnienie między prośbą o funkcję a zgłoszeniem błędu warto zrobić już przy przyjęciu, bo trafiają one do różnych właścicieli, a zduplikowane prośby o funkcje trzeba scalać z zachowaniem liczników, ponieważ dziesięciu testerów proszących o to samo to już sama w sobie informacja. W Changeloop zgłoszenie wysłane przez widżet opinii staje się issue na GitHubie z etykietą bug lub feature-request, plus etykietą priorytetu i from-widget, więc opinie z bety trafiają do tego samego trackera co praca, której dotyczą.
Kiedy test beta jest skończony?
Beta jest skończona, gdy pozostałe problemy są znane, żaden z nich nie blokuje wydania, a nowe zgłoszenia napływają już tylko pojedynczo. Spisz kryteria wyjścia, zanim beta się zacznie, bo inaczej kończy się zwykle w dniu, który ktoś obiecał klientowi.
Sprawdzający się zestaw kryteriów wyjścia:
- Żaden otwarty błąd nie jest oceniony jako bloker.
- Poziom awarii i błędów jest równy lub niższy od ustalonego dla wydania.
- Liczba nowych zgłoszeń dziennie spadła, a większość z nich powtarza znane problemy.
- Najczęściej proszone zmiany są albo zrobione, albo wyraźnie odłożone, a testerzy wiedzą które.
- Dokumentacja dla wsparcia i release notes są przygotowane na podstawie tego, z czym testerzy faktycznie mieli kłopot.
Gdy to wszystko jest spełnione, zamroź funkcje i zbuduj pierwszego release candidate. Błędy znalezione od tej chwili naprawia się tylko wtedy, gdy blokują wydanie.
Jak domknąć pętlę z testerami bety?
Powiedz testerom, co się stało z tym, co zgłosili, tym samym kanałem, którego użyli do zgłoszenia. Ludzie, którzy widzą, jak ich opinie zamieniają się w poprawki, testują dalej, a ci, którzy nic nie słyszą, przestają.
Wysyłaj krótką notatkę z każdym nowym buildem bety, z listą poprawek pochodzących ze zgłoszeń testerów, i powiedz wprost, które prośby nie trafią do wydania. Gdy ukaże się wersja finalna, release notes powinny wskazać zmiany, które napędzili testerzy; szablon release notes daje do tego strukturę. Changeloop robi to dla każdego zgłoszenia: gdy wpis changelogu powiązany z issue z widżetu zostaje zatwierdzony, issue dostaje jeden komentarz mówiący, że zmiana została wydana, z linkiem do wpisu w publicznym changelogu. Szerszą praktykę opisuje tekst o domykaniu pętli feedbacku klienta.
FAQ
Czy testy beta to to samo co testy akceptacyjne użytkownika? Częściowo się pokrywają, ale odpowiadają na różne pytania. Testy akceptacyjne użytkownika sprawdzają oprogramowanie względem uzgodnionych wymagań, zwykle robi to klient lub właściciel biznesowy przed odbiorem, a testy beta obserwują, jak szersza grupa używa produktu w praktyce.
Czy mały zespół może pominąć testy alfa? Może je skrócić, ale pominięcie ich całkiem jest ryzykowne. Nawet kilka dni, w których zespół używa builda do prawdziwej pracy, zanim zobaczy go ktokolwiek z zewnątrz, usuwa awarie i zepsute przepływy, które w przeciwnym razie zmarnowałyby pierwsze wrażenie testerów.
Co następuje po testach beta? Release candidate, a potem ogólna dostępność. Kandydat to build z zamrożonymi funkcjami, który trafia do wydania bez zmian, chyba że testy znajdą bloker, a wydanie finalne to ten sam build z nową etykietą.
Ilu testerów bety potrzeba? Tylu, by pokryć platformy, typy kont i główne przepływy pracy, które produkt obsługuje. Niektóre sklepy ustalają też dolną granicę, na przykład 12 testerów i 14 dni testu zamkniętego, jakie Google Play wymaga od nowych osobistych kont deweloperskich.
Twierdzenia techniczne w tym artykule nie zostały niezależnie zweryfikowane. Jeśli coś się nie zgadza, daj nam znać, a poprawimy to.