07 · Haladó tesztmenedzsment

Mérőszámok, amelyek döntést támogatnak

A státuszt nem egyetlen százalék, hanem a lefedés, eredmény és bizonytalanság együtt írja le

A lecke végére képes leszel

A mérőszámot egy konkrét vezetői vagy csapatkérdéshez kapcsolod.
A jelentésben szétválasztod a tényt, az értelmezést és a javaslatot.

Mérési kérdés nélkül ne gyűjts adatot

Minden mutatóhoz először kérdezd meg: milyen döntést tesz könnyebbé? A végrehajtott tesztek aránya az aktivitásról szól, de nem feltétlenül a termék minőségéről. A kritikus útvonalak lefedettsége, a nyitott súlyos hibák vagy a blokkolt környezetek aránya bizonyos döntéshez közvetlenebb jel lehet. Egyetlen mutató ritkán ad teljes képet.

A definíció legyen közös: mi a számláló, mi a nevező, mi az adatforrás, milyen időszakra vonatkozik és milyen kivételeket tartalmaz? Ha a csapat egyik héten a sikeres eseteket, a következő héten a már megkezdetteket is beleszámítja, a trend félrevezető lesz. A méréshez szükséges adat rögzítését a napi munkába illeszd, különben a jelentés késve vagy kézzel javítva készül.

A mutatók alakítják a viselkedést. Ha kizárólag a lezárt hibajegyek vagy zöld futások számát jutalmazzák, a munkatársak a könnyű feladatokat részesíthetik előnyben. Ezért az adatot kontextussal, minőségi megfigyeléssel és több nézőponttal együtt értelmezzük; projektek rangsorolására csak összehasonlítható feltételek mellett alkalmas.

Gyakorlati példa

Ha a tesztek 80%-a lefutott, de a maradék 20% teljes egészében a fizetési visszatérítést ellenőrzi, a „80% kész” adat nem támasztja alá a fizetési folyamat készenlétét. A jelentésben mutasd meg a kockázati bontást.

Rövid, cselekvést kiváltó jelentés

A vezetői jelentés kezdje a döntést befolyásoló megállapítással. Ezután mutassa be, melyik verziót és környezetet vizsgáltuk, mi tartozott a hatókörbe, melyik fontos tevékenység készült el, milyen hibák és akadályok maradtak, és milyen vizsgálat hiányzik. A grafikon legyen olvasható, tengellyel és időszakkal; a szín önmagában ne hordozza az egyetlen jelentést.

A tényt, értelmezést és javaslatot külön mondd ki. „Három kritikus eset blokkolt, mert a külső szolgáltatás nem elérhető” megfigyelés. „A kiadás minőségi bizonyítéka hiányos” értelmezés. „A döntést egy nappal halasszuk vagy a funkciót kapcsoljuk ki” javaslat. A döntéshozó, felelős és határidő kerüljön a végére.

A jelentés bizonytalanságot is közöljön: kis minta, eltérő környezet, adatminőségi probléma, rövid mérési idő vagy végre nem hajtott terület. Ezzel a szám nem tűnik pontosabbnak, mint amilyen. Az üzenet hosszát és részletét a címzett feladatához igazítsd.

Részletes esettanulmány

Esettanulmány: vezetői státuszjelentés döntési helyzetben

Egy belső ügyfélszolgálati rendszer kiadása előtt a tesztesetek 82 százalékát végrehajtották. A zöld futások aránya 91 százalék, de a még hátralévő esetek mind a jogosultságot, az adatletöltést és a visszaállítást érintik. A vezetőség két napon belül döntést kér.

A százalékos összesítés önmagában túl kedvező képet mutatna. A jelentésnek a döntéshez szükséges tényeket, a még nem ismert dolgokat és konkrét javaslatot kell elválasztania.

Elemzési és döntési lépések

1Azonosítsd a jelentés olvasóját és kérdését: mit kell tudnia a kiadásról, és milyen határidőig kell döntést hoznia?
2Mutasd meg külön a tesztelt verziót, környezetet, hatókört, befejezett és blokkolt munkát, kritikus hibákat és lefedetlen kockázatokat.
3A szám mellé tedd oda a nevezőt és a trendet. Például a 82 százalékból derüljön ki, hogy 164/200 esetet futtattak, de a futásokat kockázat és üzleti folyamat szerint is bontsd.
4Válaszd külön a tényt, az értelmezést és a javaslatot. A javaslat lehet feltételes kiadás, tesztidő-hosszabbítás vagy egy funkció ideiglenes kikapcsolása; a maradék kockázat elfogadója legyen megnevezve.

Menedzseri döntés

A tesztvezető nem hirdet általános készenlétet. Azt javasolja, hogy a kiadás addig ne történjen meg, amíg a kritikus hozzáférési és adat-helyreállítási próbák eredménye nem ismert, vagy a felelős vezető dokumentáltan nem fogadja el a maradék kockázatot.

Gondold végig

Készíts öt soros vezetői összefoglalót, amelyben van egy tény, egy kockázat, egy hiányzó bizonyíték, egy javaslat és egy szükséges döntés.

A lecke legfontosabb gondolatai

•A mutató egy meghatározott kérdéshez tartozzon.
•A szám mellé nevező, időszak, forrás és korlát is kell.
•A jelentés kérjen konkrét döntést, ne csak adatot közöljön.