정의된 결정 규칙을 사용하여 소규모 실험을 실행합니다.

팀이 한 번에 너무 많은 것을 변경하거나 데이터를 살펴본 후 성공을 재정의하면 실험은 가치를 잃습니다. 결과가 결정적이지 않은 경우에도 간단한 프로토콜을 사용하면 학습이 더욱 명확해집니다.

가설과 메커니즘 작성

사용: “[그룹]으로 [변경]하면 [이유] 때문에 [부호]를 관찰할 것으로 예상됩니다.” 이유가 중요합니다. 신호가 변경되지 않으면 가설이나 메커니즘이 잘못되었는지 평가할 수 있습니다.

테스트 정의

주요 변화, 그룹 또는 상황, 기간 및 관찰 기록 방법을 선택하십시오. 어떤 결과가 가설을 뒷받침하는지, 어떤 결과가 가설을 약화하는지, 어떤 결과가 더 많은 정보를 필요로 하는지 미리 정의합니다. 관찰 횟수가 적은 테스트에서는 패턴을 통계적 증거가 아닌 단서로 취급하십시오.

안전 및 노력 제한을 포함합니다.

테스트에 소요되는 시간이나 리소스의 양과 조기 중지가 필요한 상황을 결정합니다. 고객, 데이터, 안전 또는 품질에 위험이 있는 경우 참가자를 보호하고 예상치 못한 피해가 발생하면 중지하십시오.

완료되면 발생한 사항, 측정되지 않은 사항 및 다음 결정(채택, 조정, 반복 또는 포기)을 기록하십시오. 불확실성을 줄이는 실험은 아이디어를 확인하지 않고도 이미 유용할 수 있습니다.

자주 묻는 질문

통제 그룹이 필요한가요?

이는 잘못된 결론과 테스트 설계로 인한 비용에 따라 달라집니다. 간단한 경우에는 전후 비교를 통해 다음 질문을 안내할 수 있지만 모든 원인을 분리할 수는 없습니다.

결과가 확실하지 않으면 어떻게 되나요?

인지할 수 있는 기간, 측정 품질 및 효과 크기를 검토하십시오. 더 나은 설계로 반복할 가치가 있는지 또는 나머지 불확실성이 허용되는지 여부를 결정하십시오.

여러 변경사항을 테스트할 수 있나요?

탐색적 테스트에서는 가능하지만 별도의 변경 사항을 통해 결과에 영향을 미친 요소를 이해하는 데 도움이 됩니다.

비즈니스에 대한 실용적인 아이디어를 계속 학습하려면 Ímpetus 뉴스레터를 무료로 구독하세요.