Bucla de feedback

Testare alpha vs beta: diferențe și când o rulezi

7 min de citit

Testarea alpha este prima rundă de testare, făcută în interiorul companiei pe un build căruia încă îi lipsesc piese și despre care se știe că e instabil. Testarea beta urmează după ea: un build cu toate funcționalitățile, sau aproape, ajunge la utilizatori reali din afara echipei, care îl folosesc în propriile medii și raportează ce se strică sau ce îi încurcă. Alpha răspunde la întrebarea dacă software-ul funcționează deloc. Beta răspunde la întrebarea dacă funcționează pentru oamenii pentru care a fost construit, pe calculatoarele lor, cu datele și obiceiurile lor.

Testare alphaTestare beta
Cine testeazăDezvoltatori, QA, alți angajațiClienți și voluntari din afara companiei
Starea builduluiSe mai adaugă funcționalități, multe erori cunoscuteComplet sau aproape, erorile sunt de așteptat
MediuLaborator, staging sau conturile echipeiDispozitive reale, date reale, fluxuri reale
Întrebarea principalăFuncționează cum a fost proiectat?Funcționează pentru utilizatorii reali?
Feedback tipicRapoarte de eroare precise, cu pașiSimptome, confuzie, funcționalități lipsă
Ce o încheieBuildul e complet și destul de stabil ca să fie arătat celor din afarăNu mai rămân blocaje, iar feedback-ul s-a rărit

Ce este testarea alpha?

Testarea alpha este testarea internă a unui build timpuriu. Cei care îl testează cunosc produsul, pot citi jurnale și acceptă că lucrurile se vor strica, așa că scopul este să găsești problemele mari înainte să le vadă cineva din afară.

Articolul Wikipedia despre ciclul de viață al lansărilor software descrie faza alpha drept prima fază de testare a software-ului: dezvoltatorii testează cu tehnici white-box, apoi o echipă de testare separată validează buildul cu tehnici black-box sau gray-box. Multe echipe adaugă un al treilea strat, anume angajații care folosesc produsul în munca lor. Practica are propriul nume, dogfooding, și găsește fricțiunea pe care un test scriptat nu o atinge niciodată.

Ce este testarea beta?

Testarea beta pune în fața utilizatorilor reali un build aproape terminat, înainte de lansarea generală. Prinde problemele care apar doar în afara clădirii: alte dispozitive și browsere, date dezordonate, fluxuri neobișnuite și oameni care n-au văzut niciodată interiorul produsului.

Același articol Wikipedia spune că faza beta începe, în general, când software-ul are toate funcționalitățile, dar probabil conține erori cunoscute sau necunoscute. Un beta închis invită un grup ales, adesea clienți care au cerut funcționalitatea sau parteneri de design. Un beta deschis lasă pe oricine să se alăture. Unele produse rămân în ceea ce se numește beta perpetuu, actualizate continuu și niciodată declarate terminate.

Care este diferența dintre testarea alpha și cea beta?

Patru lucruri se schimbă între cele două faze: cine testează, cât de finalizat e buildul, unde rulează și ce se întâmplă cu un raport. Testerii alpha sunt oameni din interior care lucrează pe un build incomplet, într-un cadru controlat, în timp ce testerii beta sunt oameni din afară care folosesc un build complet pentru munca lor reală.

Ultima diferență contează cel mai mult pentru cei care citesc rapoartele. Un raport alpha vine de obicei de la cineva care cunoaște codul, numește componenta și include pași. Un raport beta vine de la cineva care a văzut un simptom, iar aceeași cauză rădăcină poate sosi sub forma a cinci plângeri diferite. De aceea feedback-ul beta are nevoie de triere înainte să ajungă la dezvoltatori: separi erorile de cereri, îmbini duplicatele și pui întrebări de clarificare cât timp testerul își amintește încă ce a făcut.

Ar trebui să rulezi un beta închis sau unul deschis?

Începe cu unul închis și deschide beta doar când ai nevoie de o scară sau o varietate pe care nu le poți recruta manual. Un grup închis este mai ușor de susținut, iar o funcționalitate neterminată scapă mai greu în public.

Magazinele de aplicații au încorporat această succesiune în uneltele lor. Google Play oferă trei tipuri de testare: testare internă pentru până la 100 de testeri, testare închisă pentru un grup invitat mai larg și testare deschisă, la care se poate alătura oricine. Conturile personale noi de dezvoltator, create după 13 noiembrie 2023, trebuie să ruleze un test închis cu cel puțin 12 testeri, înscriși continuu cel puțin 14 zile, înainte să poată cere acces la producție. TestFlight de la Apple permite până la 100 de testeri interni din echipa de dezvoltare și până la 10.000 de testeri externi, iar primul build trimis testerilor externi trebuie aprobat de App Review. Toate cele trei cifre au fost verificate pe 16 octombrie 2026.

Cum versionezi buildurile alpha și beta?

Dă fiecărui build o versiune care spune cărei etape îi aparține și care se ordonează în ordinea lansării. Sufixele de pre-lansare fac ambele lucruri.

Semantic Versioning marchează o pre-lansare cu o cratimă și identificatori separați prin puncte, după versiunea spre care lucrezi. Exemplul de precedență din specificație arată așa: 1.0.0-alpha < 1.0.0-alpha.1 < 1.0.0-alpha.beta < 1.0.0-beta < 1.0.0-beta.2 < 1.0.0-beta.11 < 1.0.0-rc.1 < 1.0.0, deci etapele se ordonează corect fără nicio tratare specială. Etichetează fiecare build în git, așa cum este descris în tag-uri git și lansări, iar când beta se termină, etapa următoare este un release candidate.

Cum colectezi și triezi feedback-ul beta?

Dă testerilor un singur loc evident unde să raporteze, în interiorul produsului dacă poți, și cere-le ce au făcut, ce se așteptau să se întâmple și ce s-a întâmplat de fapt. Apoi sortează fiecare raport ca eroare, cerere de funcționalitate sau întrebare, îmbină duplicatele și răspunde testerului.

Firele de email și canalele de chat par prietenoase la începutul unui beta și devin imposibil de căutat într-o săptămână. Un formular sau un widget în produs captează pagina, versiunea și contul fără să ceară testerului să le scrie. Distincția dintre o cerere de funcționalitate și un raport de eroare merită făcută încă de la primire, pentru că cele două ajung la responsabili diferiți, iar cererile de funcționalități duplicate trebuie îmbinate cu numărătorile păstrate, pentru că zece testeri care cer același lucru sunt o constatare în sine. În Changeloop, un raport trimis prin widgetul de feedback devine un issue GitHub etichetat bug sau feature-request, plus o etichetă de prioritate și from-widget, astfel că feedback-ul beta ajunge în același tracker ca munca pe care o descrie.

Când se termină un test beta?

Un beta se termină când problemele rămase sunt cunoscute, niciuna nu blochează lansarea, iar rapoartele noi s-au rărit până la un firicel. Scrie criteriile de ieșire înainte să înceapă beta, altfel tinde să se încheie la data promisă unui client.

Un set de criterii de ieșire care funcționează:

  • Nicio eroare deschisă nu este clasificată drept blocaj.
  • Ratele de crash și de eroare sunt la nivelul stabilit pentru lansare sau sub el.
  • Numărul de rapoarte noi pe zi a scăzut, iar cele mai multe repetă probleme cunoscute.
  • Cele mai cerute schimbări sunt fie făcute, fie amânate explicit, iar testerii au aflat care.
  • Documentația de suport și release notes sunt redactate pornind de la ce le-a dat cu adevărat bătăi de cap testerilor.

Când toate acestea sunt adevărate, îngheață funcționalitățile și generează primul release candidate. Erorile găsite de atunci încolo se remediază doar dacă blochează livrarea.

Cum închizi bucla cu testerii beta?

Spune-le testerilor ce s-a întâmplat cu ce au raportat, pe același canal pe care au raportat. Oamenii care văd cum feedback-ul lor devine remedieri continuă să testeze, iar cei care nu aud nimic se opresc.

Trimite o notă scurtă cu fiecare build beta nou, cu remedierile care provin din rapoartele testerilor, și spune pe față ce cereri nu vor intra în lansare. Când iese versiunea finală, release notes ar trebui să menționeze schimbările împinse de testeri; șablonul de release notes oferă o structură pentru asta. Changeloop face asta per raport: când o intrare de changelog legată de un issue din widget este aprobată, issue-ul primește un singur comentariu care spune că schimbarea a fost livrată, cu un link către intrarea din changelog-ul public. Practica mai largă este tratată în închiderea buclei de feedback a clientului.

FAQ

Este testarea beta același lucru cu testarea de acceptanță a utilizatorului? Se suprapun, dar răspund la întrebări diferite. Testarea de acceptanță a utilizatorului verifică software-ul față de cerințele agreate, de obicei de către client sau responsabilul de business înainte de aprobare, în timp ce testarea beta observă cum folosește produsul în practică un grup mai larg.

Poate o echipă mică să sară peste testarea alpha? O poate scurta, dar a sări complet peste ea e riscant. Chiar și câteva zile în care echipa folosește buildul pentru munca reală, înainte să-l vadă cineva din afară, elimină crashurile și fluxurile stricate care altfel ar strica prima impresie a testerilor.

Ce urmează după testarea beta? Un release candidate, apoi disponibilitatea generală. Candidatul este un build cu funcționalitățile înghețate, care se livrează neschimbat dacă testarea nu găsește un blocaj, iar lansarea finală este același build, re-etichetat.

De câți testeri beta ai nevoie? De destui cât să acoperi platformele, tipurile de conturi și fluxurile principale pe care le suportă produsul. Unele magazine impun și un minim, cum e testul închis de 12 testeri și 14 zile pe care Google Play îl cere conturilor personale noi de dezvoltator.


Afirmațiile tehnice din acest articol nu au fost verificate independent. Dacă ceva nu e corect, spune-ne și vom corecta.

Pe Changeloop: Documentație pentru dezvoltatori, Șablon note de lansare

changeloop
Echipa care construiește un changelog care închide bucla. Utilizatorii cer ceva, echipa ta livrează, cel care a cerut află.