Voer kleine experimenten uit met een gedefinieerde beslisregel

Experimenten verliezen hun waarde als het team te veel dingen tegelijk verandert of succes opnieuw definieert nadat ze naar de gegevens hebben gekeken. Een eenvoudig protocol maakt het leren duidelijker, zelfs als het resultaat niet doorslaggevend is.

Schrijf de hypothese en het mechanisme op

Gebruik: “Als we [verandering] aanbrengen in [groep], verwachten we [teken] te observeren omdat [reden].” De reden is belangrijk: als het signaal niet verandert, kun je beoordelen of de hypothese of het mechanisme verkeerd was.

Definieer de test

Kies een belangrijke verandering, de groep of situatie, de periode en hoe u observaties vastlegt. Bepaal vooraf welk resultaat de hypothese zou ondersteunen, welk resultaat deze zou verzwakken en welk resultaat meer informatie zou vereisen. Beschouw bij tests met weinig waarnemingen patronen als aanwijzingen en niet als statistisch bewijs.

Neem veiligheids- en inspanningslimieten op

Bepaal hoeveel tijd of middelen de test kan kosten en in welke situatie vroegtijdig moet worden gestopt. Als er een risico is voor klanten, gegevens, veiligheid of kwaliteit, bescherm dan de deelnemers en stop als er onverwachte schade ontstaat.

Leg na afloop vast wat er is gebeurd, wat er niet is gemeten en wat de volgende beslissing is: adopteren, aanpassen, herhalen of afzien. Een experiment dat de onzekerheid vermindert, kan al nuttig zijn, zelfs zonder het idee te bevestigen.

Veelgestelde vragen

Heb ik een controlegroep nodig?

Het hangt af van de kosten van een verkeerde conclusie en het testontwerp. In eenvoudige gevallen kan een voor/na-vergelijking leidend zijn bij de volgende vraag, maar deze isoleert niet alle oorzaken.

Wat moet ik doen als het resultaat niet doorslaggevend is?

Beoordeel de duur, de kwaliteit van de meting en de omvang van het effect dat u kunt waarnemen. Bepaal of het de moeite waard is om het te herhalen met een beter ontwerp of dat de resterende onzekerheid acceptabel is.

Kan ik meerdere wijzigingen testen?

Dat kan bij verkennende tests, maar afzonderlijke wijzigingen helpen begrijpen wat het resultaat heeft beïnvloed.

Om te blijven leren met praktische ideeën voor het bedrijfsleven, kunt u zich gratis abonneren op de Ímpetus-nieuwsbrief.