2
실험을 다시 실행하여 웹 a / b 테스트의 유효성을 검사하십시오. 이것이 유효합니까?
며칠 전에 a / b 테스트 회사의 웹 세미나에서 상주 "데이터 과학자"가 실험을 다시 실행하여 결과를 확인해야한다고 설명했습니다. 전제 조건은 95 % 신뢰를 선택하면 오 탐지 확률이 5 % (1/20)라는 것입니다. 동일한 제약 조건으로 실험을 다시 실행하면 1/400이 있습니다 (이것이 0.05 ^ 2 = 1/400으로 결정되었다고 가정합니다) 이것이 유효한 진술입니까? …