Izvedite majhne poskuse z definiranim pravilom odločanja

Eksperimenti izgubijo vrednost, ko ekipa spremeni preveč stvari naenkrat ali na novo opredeli uspeh po pregledu podatkov. Preprost protokol naredi učenje jasnejše, tudi če rezultat ni dokončen.

Napišite hipotezo in mehanizem

Uporabite: »Če [spremenimo] [skupino], pričakujemo, da bomo opazili [znak], ker [razlog].« Razlog je pomemben: če se signal ne spremeni, lahko ocenite, ali je bila hipoteza ali mehanizem napačen.

Določite test

Izberite glavno spremembo, skupino ali situacijo, obdobje in način beleženja opažanj. Vnaprej določite, kateri rezultat bi podprl hipotezo, kateri bi jo oslabil in kateri bi zahteval več informacij. Pri testih z malo opazovanji vzorce obravnavajte kot namige, ne kot statistične dokaze.

Vključite varnostne omejitve in omejitve napora

Ugotovite, koliko časa ali sredstev lahko porabi test in kakšna situacija zahteva zgodnjo ustavitev. Če obstaja tveganje za stranke, podatke, varnost ali kakovost, zaščitite udeležence in se ustavite, ko pride do nepričakovane škode.

Ko končate, zabeležite, kaj se je zgodilo, kaj ni bilo izmerjeno in naslednjo odločitev: sprejeti, prilagoditi, ponoviti ali opustiti. Eksperiment, ki zmanjša negotovost, je že lahko uporaben, tudi brez potrditve ideje.

Pogosta vprašanja

Ali potrebujem kontrolno skupino?

Odvisno je od cene napačnega zaključka in zasnove testa. V preprostih primerih lahko primerjava prej/potem vodi naslednje vprašanje, vendar ne izolira vseh vzrokov.

Kaj pa, če rezultat ni dokončen?

Trajanje pregleda, kakovost meritve in velikost učinka, ki bi ga lahko zaznali. Odločite se, ali je vredno ponoviti z boljšim dizajnom ali pa je preostala negotovost sprejemljiva.

Ali lahko preizkusim več sprememb?

Lahko v raziskovalnem testiranju, vendar ločene spremembe pomagajo razumeti, kaj je vplivalo na rezultat.

Če želite nadaljevati učenje s praktičnimi idejami za podjetja, se brezplačno naročite na glasilo Ímpetus.