Suitsutest ja regressioonitestimine: sisselogimisviisid
Harjutad uue sisselogimisviisi lisamise testimist. Lisad Mobile-ID, teed suitsutesti ja leiad regressioonitestimisega senistes sisselogimisviisides kaks viga, mis tekkisid muudatuse tõttu.
- 1Regressioonitestimine
- 2Ülesanne ja disain
- 3Suitsutest
- 4Mobile-ID
- 5Regressioonitestimine
- 6Kordustest
- 7Väljalase
Esimene päev meeskonnas
Tere! Mis su nimi on?
Tere! Tere tulemast!
Tutvu tootega
Siin on meie toode — kontole sisselogimise vorm. Olemasolev kasutaja saab sisse logida parooli, Smart-ID või Google Authi abil. Vaata ringi ja proovi erinevaid viise. See on testkeskkond: kasuta väljade all toodud testandmeid; välised teenused on asendatud makettidega.
Kui oled vaadanud, on mul sulle esimene ülesanne.
Üks hetk, tutvun sellega.
Kõik on selge, lähme edasi
Vaatame kiirelt üle, kas kõik on meeskonnaga töö alustamiseks selge. Millega meie toode tegeleb?
Vaata vormi veel kord ja proovi uuesti.
Õige! Milliseid sisselogimisviise me praegu toetame?
Vaata vormi veel kord ja proovi uuesti.
Valmis!
Peagi lisame veel ühe sisselogimisviisi. Enne muudatuste tegemist tuleb koostada regressioonikomplekt — loend sellest, mis juba töötab ja mida tuleb pärast muudatusi uuesti kontrollida. See ongi sinu esimene ülesanne.
Mis praegu töötab? — Koostame regressioonitestide komplekti
Siin on sinu esimene ülesanne! Praegu saab kontole sisse logida parooli, Smart-ID või Google Authiga. Enne kui uue viisi lisame, koosta palun regressioonikomplekt.
Mida sa praegu regressioonitestikomplekti lisad?
Päris nii see pole. Regressioonikomplekti peavad kuuluma kõik tootes juba olemasolevad sisselogimisviisid — ja mitte midagi üleliigset.
Uus ülesanne
Tere! Järgmine ülesanne: lisame uue sisselogimisviisi — Mobile-ID. See peab olema nimekirja lõpus, Google Authi järel.
Kuidas see töötab: kasutaja valib Mobile-ID, sisestab telefoninumbri, näeb kontrollkoodi ja kinnitab päringu telefonis. Pärast kinnitamist avaneb konto; kui kasutaja päringu tühistab, jääb ta sisselogimisvormile ja saab uuesti proovida.
Palun jälgi ka, et kõik senised viisid töötaksid endiselt nagu varem.
Tere, Mari! Palun näita, kuidas Mobile-ID sisselogimisvormil välja näeb.
Mari joonistab maketti
Valmis! Lisasin Mobile-ID viiside nimekirja. Telefoniväli ja kontrollkood ilmuvad alles pärast selle valimist ning nupp jääb paigale.
Sisselogimisvorm: parool, Smart-ID, valitud Mobile-ID ja Google Auth. Nende all on telefoninumbri väli näidisnumbriga +372 51234567 ning nupp „Jätka“. Punktiirnooled osutavad uuele viisile ja selle valimisel ilmuvatele väljadele.
{name}, enne kui Mark tööle asub, võrdle palun maketti nõuetega. Kas kõik on õige?
Võrdle maketil viiside järjekorda Krista ülesandega.
Oi, tõesti — aitäh, et märkasid! Parandan kohe.
Mari joonistab maketti
Parandatud: Mobile-ID on nüüd nimekirja lõpus, Google Authi järel.
Sisselogimisvorm: parool, Smart-ID, Google Auth ja loendi lõpus valitud Mobile-ID. Nende all on telefoninumbri väli näidisnumbriga +372 51234567 ning nupp „Jätka“. Punktiirnooled osutavad uuele viisile ja selle valimisel ilmuvatele väljadele.
Mark, ülesanne ja makett on valmis — võid alustada.
Mark lisab Mobile-ID
Järk 2.0 on testkeskkonnas. Mobile-ID-d saab testida.
Järgu kiire kontroll
Teeme suitsutesti! Ava vorm ja kontrolli, et:
- neli sisselogimisviisi on näha
- paigutus on korras
- sisselogimisnupp on kasutatav
See on lühike suitsutest, mitte kõigi autentimistulemuste kontroll.
Milline on suitsutesti tulemus?
Vali viis ja vajuta vormis „Jätka“, et nuppu kontrollida.
Uue funktsiooni testimine: Mobile-ID
See on uue funktsiooni testimine: kontrollime ainult Mobile-ID-d — ülejäänud sisselogimisviise kontrollime regressioonitestimisel. Proovi vormis mõlemat tulemust: kinnita päring ja tühista see ning pärast tühistamist proovi uuesti. Märgi iga tehtud kontroll loendis ise.
Kontrolli seniseid viise
Läbi regressioonikomplekt, mille salvestasid esimesel sammul. Kontrolli õiget ja vale sisselogimist, seansi püsimist ning kinnitatud ja tühistatud välist sisselogimist. Neid radu suitsutestis ei läbitud.
Tee stsenaarium vormis läbi — seejärel kontroll avaneb ja saad tulemuse ise märkida: PASSED või FAILED.
- Parool: õiged andmed avavad konto.
- Parool: valed andmed näitavad viga.
- Parool: „Jäta mind meelde” säilitab seansi pärast taaslaadimist.
- Smart-ID: kinnitus avab konto.
- Smart-ID: tühistamine jätab kasutaja sisselogimisvormile.
- Google Auth: kinnitus avab konto.
- Google Auth: tühistamine jätab kasutaja sisselogimisvormile.
Analüüsi kahte defekti
Järgu 2.0 regressioonitestimisel said kaks stsenaariumi oleku FAILED. Koosta nende kohta vearaportid: vali kummagi puhul oodatud tulemus — kuidas nõuete järgi peaks töötama — ja tegelik tulemus — mida vormis nägid.
Kirjelda palun mõlemat defekti: mis oleks pidanud juhtuma ja mis tegelikult juhtus. Sammude järgi saan need kohe taasesitada ja parandada.
Sammud: Logi parooliga sisse, märkides „Jäta mind meelde”, ja laadi leht uuesti.
Sammud: Vali Google Auth, vajuta „Jätka”, seejärel „Tühista”.
Võrdle ettenähtud käitumist vormis nähtud tulemusega.
Kontrolli parandusi
BUG-201 ja BUG-202 saadeti Markile. Väljalase on praegu peatatud.
Aitäh vearaportite eest! Parandasin mõlemad defektid ja panin järgu 2.0.1 testkeskkonda — palun kontrolli.
Mark parandas mõlemad defektid ja avaldas järgu 2.0.1. Korda mõlemat stsenaariumi ning kontrolli, et tavaline sisselogimine ikka töötab.
Tee stsenaarium vormis läbi — seejärel kontroll avaneb ja saad tulemuse ise märkida: PASSED või FAILED.
- Parool koos valikuga „Jäta mind meelde” säilib pärast taaslaadimist.
- Google Authi tühistamine jätab kasutaja vormile.
- Tavaline parooliga sisselogimine töötab.
Väljalaske otsus
Suitsutest ja uus funktsioon läbisid kontrolli; kaks regressiooniviga parandati ja kontrolliti uuesti. Kas järgu 2.0.1 võib välja lasta?
Mõlemad leitud defektid on parandatud ja kinnitatud. Avatud defekte pole.
Krista, järgu 2.0.1 testimine on lõpetatud. Mobile-ID töötab nõuete järgi ning mõlemad regressioonivead on parandatud ja uuesti kontrollitud. Avatud defekte pole — järk on väljalaskeks valmis.
Suurepärane! Laseme välja.
Krista andis nõusoleku. Kas lasen järgu 2.0.1 tootmiskeskkonda?
Jah, lase välja
Mark teeb väljalaset
Valmis! Järk 2.0.1 on tootmiskeskkonnas.
Tere kõigile! Mobile-ID-ga sisselogimine on nüüd tootmiskeskkonnas.
Järk on väljalaskeks valmis
Testisid Mobile-ID-d, leidsid kahes senises viisis vea ja kinnitasid parandused.
Vali viis
Testandmed: qa@example.com / Demo123!
Lühiviide
Suitsutestimine (smoke testing)
Uue versiooni kõige olulisemate funktsioonide lühike kontroll: kas rakendus avaneb ja kas põhielemendid töötavad. Kui suitsutest ebaõnnestub, saadetakse versioon arendajale tagasi — edasine testimine pole mõttekas.
Kordustestimine (retest)
Konkreetse defekti uuesti kontrollimine pärast parandamist: korratakse samme, millega see taasesitati, ja veendutakse, et defekti enam pole.
Uue funktsionaalsuse testimine
Kontroll, et uus funktsioon töötab nõuete järgi: põhistsenaarium, alternatiivsed stsenaariumid ja vigade käsitlemine.
Regressioonitestimine
Kontroll, et muudatused pole rikkunud seda, mis juba töötas. Regressioonikomplekt on mugav määrata ette — juba enne uue funktsiooni kallal töö algust.