텍스트만 변경 vs 텍스트 및 이미지 변경 A/B TEST 방법 차이

안녕하세요 A/B TEST 진행하고 싶은데 

A안. 텍스트 문구만 변경 후 테스트

B안. 텍스트 및 구성, 이미지도 변경 후 테스트

 

A안과 B안 중에 고민입니다. 혹시 옵티마이즈 없이 진행하게 되면 방식이 어떻게 달라지나요?

 

프로필

운영자 래비

안녕하세요 운영자 래비입니다.



A안으로 실행하시는 것을 추천드립니다. 이유는 실험 결과를 명확하게 해석하기 위함입니다.

좀 더 자세한 이유를 아래에 설명드리겠습니다.



A/B TEST를 성공적으로 수행하기 위해서는 조작변인과 통제변인을 확실히 구분해야 하며,

조작변인만 보고도 실험의 목적을 파악할 수 있도록 해야 합니다.



조작변인 - 가설을 검증하기 위해 값을 변화시키는 변인

통계변인 - 조작 변인을 제외한 나머지 변인. 값을 변화시키지 않고 유지시키는 변인.



조작 변인 외의 통계 변인은 변하지 않고 유지되어야 실험 결과가 오직 조작변인 때문에 나타났다고 판단할 수 있습니다.

A안. 텍스트 문구(조작변인) 변경
B안. 텍스트 문구(조작변인1), 텍스트 구성(조작변인2), 이미지 (조작변인3) 변경

입니다. B안의 경우 실험 결과가 나오더라도 조작변인 1/2/3 중 어떤 요인 때문인지 구분할 수 없습니다.
따라서 A안으로 추천드립니다.



또한 옵티마이즈 없이 진행하게 될 경우

유입사용자를 무작위로 1~10까지 번호를 부여하여 1~5번의 경우 A 원본 페이지, 6~10의 경우 B 대안 페이지

로 화면이 보이도록 하여 실험을 진행하게 됩니다.



설명이 되셨을까요?

추가 궁금한 사항의 경우 문의 주시면 친절히 답변 드리겠습니다:)



감사합니다.

데이터를 통한 비즈니스 성장!
회사에 맞는 최적화된 솔루션을 찾아보세요
labbit을 통한 눈에 뛰는 성장
문의하기