Alfa vs beta testování: rozdíly a kdy co spustit
6 min čtení
Alfa testování je první kolo testování, které probíhá uvnitř firmy na buildu, kterému ještě něco chybí a o kterém se ví, že je nestabilní. Beta testování následuje: build s kompletními funkcemi, nebo téměř kompletními, jde k opravdovým uživatelům mimo tým, kteří ho používají ve vlastním prostředí a hlásí, co se rozbije nebo co je zmate. Alfa odpovídá na otázku, jestli software vůbec funguje. Beta odpovídá na to, jestli funguje pro lidi, pro které vznikl, na jejich počítačích, s jejich daty a jejich zvyky.
| Alfa testování | Beta testování | |
|---|---|---|
| Kdo testuje | Vývojáři, QA, další zaměstnanci | Zákazníci a dobrovolníci mimo firmu |
| Stav buildu | Funkce se ještě přidávají, mnoho známých chyb | Kompletní nebo téměř, chyby se očekávají |
| Prostředí | Laboratoř, staging nebo vlastní účty týmu | Skutečná zařízení, skutečná data, skutečné postupy |
| Hlavní otázka | Funguje to, jak bylo navrženo? | Funguje to pro skutečné uživatele? |
| Typická zpětná vazba | Přesná hlášení chyb s kroky | Příznaky, zmatení, chybějící funkce |
| Co ji ukončí | Build je hotový a dost stabilní, aby ho šlo ukázat lidem zvenčí | Nezbývají žádné blokující chyby a zpětná vazba utichá |
Co je alfa testování?
Alfa testování je interní testování raného buildu. Lidé, kteří ho provádějí, produkt znají, umějí číst logy a počítají s tím, že se věci budou rozbíjet, takže cílem je najít velké problémy dřív, než je uvidí kdokoli zvenčí.
Článek na Wikipedii o životním cyklu vydání softwaru popisuje alfa fázi jako první fázi testování softwaru: vývojáři testují technikami bílé skříňky a samostatný testovací tým pak build ověřuje technikami černé nebo šedé skříňky. Mnoho týmů přidává třetí vrstvu, kdy zaměstnanci produkt používají při vlastní práci. Tato praxe má vlastní název, dogfooding, a odhalí tření, kterého se skriptovaný test nikdy nedotkne.
Co je beta testování?
Beta testování předloží skoro hotový build skutečným uživatelům před obecným vydáním. Zachytí problémy, které se objeví jen mimo budovu: jiná zařízení a prohlížeče, nepořádek v datech, neobvyklé postupy a lidi, kteří nikdy neviděli vnitřek produktu.
Stejný článek na Wikipedii uvádí, že beta fáze obvykle začíná, když má software kompletní funkce, ale pravděpodobně obsahuje známé nebo neznámé chyby. Uzavřená beta zve vybranou skupinu, často zákazníky, kteří o funkci požádali, nebo designové partnery. Otevřená beta nechá přidat se komukoli. Některé produkty zůstávají v takzvané věčné betě, průběžně se aktualizují a nikdy se neprohlásí za hotové.
Jaký je rozdíl mezi alfa a beta testováním?
Mezi oběma fázemi se mění čtyři věci: kdo testuje, jak hotový je build, kde běží a co se stane s hlášením. Alfa testeři jsou lidé zevnitř, kteří pracují s neúplným buildem v řízeném prostředí, kdežto beta testeři jsou lidé zvenčí, kteří používají kompletní build při skutečné práci.
Poslední rozdíl je nejdůležitější pro ty, kdo hlášení čtou. Alfa hlášení obvykle píše někdo, kdo zná kód, pojmenuje komponentu a uvede kroky. Beta hlášení píše někdo, kdo viděl příznak, a stejná příčina může dorazit jako pět různých stížností. Zpětnou vazbu z bety je proto potřeba roztřídit dřív, než se dostane k vývojářům: oddělit chyby od požadavků, sloučit duplicity a doptat se, dokud si tester pamatuje, co dělal.
Máte spustit uzavřenou, nebo otevřenou betu?
Začněte uzavřenou a otevřete ji, až když potřebujete rozsah nebo rozmanitost, kterou ručně nenaverbujete. Uzavřená skupina se snáz podporuje a je menší riziko, že unikne nedokončená funkce.
Obchody s aplikacemi tuto posloupnost zabudovaly do svých nástrojů. Google Play nabízí tři testovací kanály: interní testování až pro 100 testerů, uzavřené testování pro širší pozvanou skupinu a otevřené testování, ke kterému se může přidat kdokoli. Nové osobní vývojářské účty vytvořené po 13. listopadu 2023 musí provést uzavřený test s nejméně 12 testery, kteří jsou přihlášení nepřetržitě alespoň 14 dní, než mohou požádat o přístup do produkce. TestFlight od Applu umožňuje až 100 interních testerů z vývojového týmu a až 10 000 externích testerů a první build odeslaný externím testerům musí schválit App Review. Všechna tři čísla byla ověřena 16. října 2026.
Jak verzovat alfa a beta buildy?
Dejte každému buildu verzi, která říká, do jaké fáze patří, a řadí se v pořadí vydání. Obojí zvládnou přípony předvydání.
Semantic Versioning označuje předvydání pomlčkou a identifikátory oddělenými tečkami za verzí, ke které směřujete. Příklad priority přímo ve specifikaci zní 1.0.0-alpha < 1.0.0-alpha.1 < 1.0.0-alpha.beta < 1.0.0-beta < 1.0.0-beta.2 < 1.0.0-beta.11 < 1.0.0-rc.1 < 1.0.0, takže se fáze řadí správně bez jakéhokoli zvláštního zacházení. Každý build označte tagem v gitu, jak popisuje článek o git tazích a vydáních, a až beta skončí, další fází je release candidate.
Jak sbírat a třídit zpětnou vazbu z bety?
Dejte testerům jedno zřejmé místo pro hlášení, pokud to jde přímo v produktu, a požádejte je o to, co udělali, co čekali a co se stalo. Potom každé hlášení zařaďte jako chybu, požadavek na funkci nebo dotaz, sloučte duplicity a testerovi odpovězte.
E-mailová vlákna a chatové kanály působí na začátku bety přátelsky a do týdne se v nich nedá hledat. Formulář nebo widget v produktu zachytí stránku, verzi i účet, aniž by je musel tester psát. Rozlišení mezi požadavkem na funkci a hlášením chyby má smysl dělat už při příjmu, protože oba směřují k různým vlastníkům, a duplicitní požadavky na funkce je třeba slučovat se zachováním počtů, protože deset testerů, kteří chtějí totéž, je samo o sobě zjištění. V Changeloop se hlášení odeslané přes widget zpětné vazby stane issue na GitHubu se štítkem bug nebo feature-request plus štítkem priority a from-widget, takže zpětná vazba z bety skončí ve stejném trackeru jako práce, které se týká.
Kdy je beta test hotový?
Beta je hotová, když jsou zbývající problémy známé, žádný z nich vydání neblokuje a nová hlášení téměř přestala přibývat. Kritéria ukončení si zapište před začátkem bety, jinak má tendenci skončit v den, který někdo slíbil zákazníkovi.
Použitelná sada kritérií ukončení:
- Žádná otevřená chyba není hodnocena jako blokující.
- Míra pádů a chyb je na úrovni, kterou jste pro vydání stanovili, nebo pod ní.
- Počet nových hlášení za den klesl a většina z nich opakuje známé problémy.
- Nejžádanější změny jsou buď hotové, nebo výslovně odložené a testeři vědí, které je které.
- Dokumentace pro podporu a release notes jsou rozepsané podle toho, s čím testeři skutečně zápasili.
Když to všechno platí, zmrazte funkce a vytvořte prvního release candidate. Chyby nalezené od té chvíle se opravují jen tehdy, pokud brání vydání.
Jak uzavřít smyčku s beta testery?
Řekněte testerům, co se stalo s tím, co nahlásili, ve stejném kanálu, který k hlášení použili. Lidé, kteří vidí, že se jejich zpětná vazba mění v opravy, testují dál, a lidé, kteří neslyší nic, přestanou.
S každým novým beta buildem pošlete krátkou zprávu se seznamem oprav, které vzešly z hlášení testerů, a upřímně napište, které požadavky se do vydání nedostanou. Až vyjde finální verze, release notes by měly uvést změny, které testeři podnítili, a šablona release notes k tomu nabízí strukturu. Changeloop to dělá u každého hlášení zvlášť: když se schválí záznam changelogu propojený s issue z widgetu, issue dostane jeden komentář, že změna vyšla, s odkazem na záznam ve veřejném changelogu. Širší postup popisuje článek o uzavření smyčky zpětné vazby zákazníků.
FAQ
Je beta testování totéž co uživatelské akceptační testování? Částečně se překrývají, ale odpovídají na různé otázky. Uživatelské akceptační testování ověřuje software proti dohodnutým požadavkům, obvykle zákazníkem nebo vlastníkem byznysu před převzetím, kdežto beta testování sleduje, jak širší skupina produkt používá v praxi.
Může malý tým alfa testování přeskočit? Může ho zkrátit, ale úplné přeskočení je riskantní. I pár dní, kdy tým používá build při skutečné práci, než ho uvidí kdokoli zvenčí, odstraní pády a rozbité postupy, které by jinak pokazily testerům první dojem.
Co následuje po beta testování? Release candidate a pak obecná dostupnost. Kandidát je build se zmrazenými funkcemi, který vyjde beze změny, pokud testování nenajde blokující chybu, a finální vydání je tentýž build pod novým označením.
Kolik beta testerů potřebujete? Dost na pokrytí platforem, typů účtů a hlavních postupů, které produkt podporuje. Některé obchody navíc stanoví minimum, například uzavřený test s 12 testery po dobu 14 dní, který Google Play vyžaduje od nových osobních vývojářských účtů.
Technická tvrzení v tomto článku nikdo nezávisle neověřil. Pokud tu něco nesedí, dej nám vědět a opravíme to.