Kilépési feltételek, jelentés és lezárás

A kölcsönző új kiadása előtt 20 tervezett tesztet szeretnénk elvégezni. A kilépési feltételeket előre rögzítettük: a kritikus kölcsönzési és visszavételi esetek mind fussanak le; ne maradjon nyitott magas súlyosságú hiba; a végrehajtott esetek legalább 90%-a legyen sikeres. Az eredmény: 18 eset lefutott, 16 megfelelt, 2 nem felelt meg, 2 a környezet hibája miatt blokkolt. Az egyik eltérésnél a visszavett eszköz továbbra is kiadottként látszik.

A 16/18 arány 88,9%, tehát a megadott sikerarány nem teljesül. A blokkolt kettő nem kerülhet a sikeres esetek közé. A visszavételi hiba a fő folyamatot érinti; súlyosságát és a körülményeket külön értékelni kell. Egy szám önmagában nem jogosít kiadási döntésre. A kilépési feltételek értékelése a tesztelés tényeken alapuló összegzése, amelyet a kiadás felelőse a többi üzleti szemponttal együtt mérlegel.

A rövid jelentés ismerteti a tesztelt verziót és időszakot, a hatókört, a tervezett és végrehajtott esetek számát, a megfelelt/nem felelt meg/blokkolt állapotok eloszlását, a lefedetlen területeket, a nyitott hibákat és a fennmaradó kockázatot. A jelentés összeveti az adatokat a kilépési feltételekkel, és javaslatot tesz további vizsgálatra vagy javításra. A bizonyítékokhoz, hibajegyekhez és futási naplókhoz vezető belső hivatkozás is hasznos.

Kerüld a megalapozatlan „hibamentes” állítást és a rejtett nevezőjű százalékot. Egyetlen kritikus folyamat hibája nagyobb súlyú lehet, mint sok sikeres, alacsony kockázatú eset. Ha az összes tervezett esetből kettő blokkolt, azt ne nevezd lefedettnek. A jelentés célja, hogy egy másik ember megértse, mi bizonyított, és mi maradt bizonytalan.

A lezáráskor ellenőrizzük, hogy a tervezett tesztmunkatermékek és hibajegyek megfelelő állapotban vannak-e, és archiváljuk a jelentést, a futási adatokat, a teszteseteket, a használt tesztadatok leírását és a környezeti beállításokat. A feleslegessé vált tesztfelhasználókat és érzékeny tesztadatokat az intézmény szabályai szerint kezeljük. A nyitott hibáknak legyen felelőse és következő lépése.

Érdemes rövid visszatekintést tartani: mi okozott újramunkát, melyik tesztadat vagy környezet volt instabil, mely hibákat lehetett volna korábban észrevenni? A tanulság a következő tesztciklus tervébe kerül. A tesztelési munka lezárható úgy is, hogy a termék még nem adható ki; a két döntés különböző.

Az átadási csomag legyen visszakereshető: melyik verzión, melyik környezetben, milyen állapotból indultak a futások, és hol találhatók az eredmények. Egy későbbi regressziós teszt csak akkor használható, ha a korábbi elvárt eredmény és az adatállapot érthető.

A jelentés állítását különítsd el a javaslattól. Állítás: a kritikus visszavételi teszt nem felelt meg. Javaslat: a hibát javítás és megerősítő, valamint kapcsolódó regressziós teszt előtt ne tekintsük lezártnak. A végső kiadási döntés a kijelölt felelősnél marad.