(꽤 큰) 간단히 말해서 분할 테스트 기본

게시 됨: 2018-08-27

간단히 말해서 분할 테스트 기본

분할 테스트의 기본 사항에 대해 알아보기 전에 몇 가지 오해 를 없애 보겠습니다.

  • 분할 테스트는 비용이 많이 듭니다.
  • 그들은 엄청난 기술적 지식을 필요로 합니다.
  • 설정 시간이 많이 필요합니다.

이것이 팀이 A/B 테스트를 실행하지 못하게 하는 것이라면 절대적으로 시작해야 합니다.

Google 콘텐츠 실험과 같은 기본적인 무료 도구를 사용하여 테스트를 설정하는 데 몇 분 정도 걸립니다(Google에서는 현재 최적화 도구를 테스트 플랫폼으로 권장하고 있음).

분할 테스트에 대한 기술적 전문 지식도 낮은 기준입니다. 사이트에 대한 Google Analytics 스크립트를 연결할 수 있는 사람이 있다면 테스트 코드에 대해 유사한 스크립트를 연결할 수 있는 사람이 있는 것입니다.

걱정해야 할 것은 기술적인 측면이 아니라 다른 모든 것입니다. 분할 테스트는 다계층 전환 최적화 계획의 일부여야 합니다 . 그리고 그런 식으로 사용하려면 분할 테스트를 올바르게 사용하는 방법을 이해해야 합니다.

기업이 분할 테스트를 사용해야 하는 이유는 무엇입니까?

  • 웹사이트의 새 페이지나 섹션을 시작하거나 장바구니의 흐름을 개선하거나 사람들이 해야 할 일을 하지 못하는 이유를 찾으려면 분할 테스트가 필요하지 않습니다. 사용성 테스트가 필요합니다.
  • 기능이 시작될 때 오류가 발생하여 전환율이 저하되지 않도록 하려면 분할 테스트가 필요하지 않습니다. 사용자 승인 테스트에 의존해야 합니다.

가장 기본적인 수준에서 중요한 페이지를 표시하는 방법에 대해 두 가지 경쟁적인 아이디어가 있을 때 분할 테스트가 필요합니다.

split test-champion vs challenger-graphic

기본 가정은 이러한 유형의 아이디어를 정기적으로 생각해 내는 프로세스가 있어야 한다는 것입니다. 분할 테스트를 다른 온라인 마케팅 활동과 완전히 별개로 실행해서는 안 됩니다.

분할 테스트에는 무엇이 있습니까?

분할 테스트의 기본 구성 요소는 챔피언 페이지와 도전자 페이지입니다.

챔피언

이것은 일반적으로 높은 이탈률 또는 낮은 전환율(따라서 도전자 페이지가 필요함)을 갖는 트래픽이 많은 페이지 (수정할 가치가 있음)입니다.

도전자

이것은 일반적으로 챔피언과 유사한 페이지이지만 페이지를 개선할 수 있는 방법에 대한 이론을 기반으로 약간의 조정이 있습니다.

일반적으로 트래픽의 절반은 챔피언 페이지로 전송되고 나머지 절반은 도전자 페이지로 전송됩니다. 이탈률 또는 클릭률과 같은 일부 측정항목이 측정되고 시간이 지남에 따라 페이지 중 하나가 승리합니다.

split test flow diagram

MVT는 어떻습니까?

다변수 테스트(MVT)는 분할 테스트의 가까운 사촌입니다.

클릭 유도문안의 배치나 스크롤 없이 볼 수 있는 부분에 신뢰 기호의 존재와 같이 두 페이지 사이에 하나의 변수를 테스트하는 대신, 다변수 테스트는 여러 페이지 간에 트래픽을 분할하여 동시에 다양한 요소 조합을 테스트합니다.

multivariate test flow diagram

효과적인 다변수 테스트를 유지하기 위해 더 높은 트래픽 막대를 지울 수 있지만 트래픽이 많은 사이트가 있는 경우 동일한 페이지에 대해 여러 분할 테스트를 실행하는 것보다 여러 변수를 테스트하는 더 효율적인 방법일 수 있습니다.

이제 막 시작하는 경우 다변수 테스트에 대해 너무 걱정하지 마십시오. 가장 중요한 페이지에서 분할 테스트를 수행하면 많은 비용을 절감할 수 있습니다.

분할 테스트에 필요한 것은 무엇입니까?

분할 테스트를 시작하는 데 많은 시간이 걸리지는 않지만 다음 두 가지를 생각해야 합니다.

분할 테스트 도구

Google 최적화 도구 의 무료 버전은 분할 테스트에 대한 경험이 없는 경우 시작하기에 좋은 곳일 수 있으므로 필요에 맞는지 확인할 수 있습니다.

도구로 할 수 있는 일의 한계에 도달하면 유료 도구 사용을 고려할 수 있습니다. Optimizely 또는 VWO와 같은 도구에서 데모를 얻을 수 있습니다.

교통/계절성

테스트 중에 사이트에 대한 트래픽이 크게 변경되지 않도록 가능한 한 많이 확인하려고 합니다. 즉, 휴일 동안 트래픽이 급격하게 바뀌거나 트래픽 구성이 변경될 것으로 예상되는 경우 분할 테스트의 안정성이 떨어집니다.

avoid seasonality graphic

분할 테스트를 하면 안 되는 회사가 있나요?

실제로 테스트를 실행하기 전에 분할 테스트를 통해 실제로 개선할 수 있는 영역을 테스트하고 있는지, 테스트를 실행할 내부 리소스 또는 AB 테스트를 수행하는 데 도움이 되는 실행 가능한 타사가 있는지 확인하십시오.

  • 테스트할 실행 가능한 페이지를 찾기 위해 Google Analytics 또는 유사한 도구가 설치되어 있지 않은 경우 AB 테스트 실행을 지연할 수 있습니다.
  • 기존의 심각한 오류 가 있는 영역을 테스트하지 마십시오. 테스트를 실행하기 전에 먼저 큰 문제를 해결하십시오.
  • 트래픽 기반 분할 테스트의 경우 한 달에 10,000~20,000회 미만의 방문이 발생하거나 하루에 10회 미만의 전환 이 발생하는 경우 AB 테스트가 아직 조직에 적합하지 않을 수 있습니다.
  • 스크립트를 연결할 사람이 없고 테스트의 승자를 사이트에 있는 공식 버전으로 만들려면 테스트 보류를 연기하는 것이 좋습니다.

테스트할 페이지를 어떻게 찾습니까?

테스트할 기본 페이지를 찾는 데 도움이 될 수 있는 몇 가지 사항이 있습니다. 웹 분석 도구, 설문 조사 도구 및 두 가지를 모두 사용하는 방법에 대한 몇 가지 기본적인 정보입니다.

웹 분석

웹 분석 도구에서 트래픽이 많은 페이지로 필터링해야 하므로 페이지를 개선할 가치가 있습니다. 그러나 사람들이 행동하지 않는 트래픽이 많은 페이지 를 찾는 경우에도 도움이 되므로 개선의 여지가 많다는 것을 알 수 있습니다. 이 두 가지는 상관관계가 그다지 좋지 않은 경향이 있으므로 해당 교차점을 찾기 위해 잠시 파고들어야 합니다.

웹 분석 도구가 Google Analytics인 경우 가중치 정렬 이라는 편리한 기능을 사용하여 해당 교차점 내부에 있는 페이지를 찾을 수 있으므로 페이지를 더 쉽게 찾을 수 있습니다.

조사

설문조사 도구에서 사람들이 수행하려고 하는 작업과 해당 작업에서 얼마나 성공적인지 알아야 합니다. 웹사이트 설문조사에 포함해야 할 몇 가지 질문이 있지만 가장 중요한 질문은 다음과 같습니다.

  • 웹 사이트에서 무엇을 찾고 있습니까?
  • 찾고 있던 정보를 찾으셨나요?

웹 분석 도구에서 트래픽이 많고 상호작용이 적은 페이지가 있는 곳에서 설문조사에서 다음 두 가지의 교차점을 찾아야 합니다 .

  • 사람들이 가장 중요하게 생각하는 작업
  • 많이 실패하는 작업

해당 교차점을 찾으면 해당 섹션에서 테스트할 중요한 페이지를 찾을 수 있습니다.

어떤 요소를 테스트해야 합니까?

도구 또는 비즈니스 우선 순위의 데이터를 기반으로 식별된 "챔피언" 페이지가 있으면 페이지를 개선하는 방법에 대한 이론을 공식화해야 합니다. 다음은 시도해 볼 수 있는 몇 가지 사항입니다.

  • 헤드라인 . 도전자 페이지에서 더 명확하게 만드십시오. 또는 소스가 귀하의 통제 하에 있는 경우(이메일, AdWords 등) 트래픽 소스와 일치시키십시오.
  • 이미지 . (스톡 사진과 대조적으로) 정품인지 확인하십시오. 그리고 얼굴이라면 클릭 유도문안을 향하게 하여 사용자의 주의를 유도하십시오.
  • 클릭 유도문안(CTA) 다른 위치를 시도해 보세요. 또는 웹 사이트의 나머지 부분에서 사용되는 색상 팔레트와 대비를 추가하여 눈에 띄게 만듭니다.
  • 양식 필드 . 도전자 페이지의 필드 수를 줄여보십시오.

어떤 결과를 찾아야 합니까?

페이지 유형에 따라 분할 테스트에 대해 몇 가지 다른 종류의 목표를 설정할 수 있습니다.

이탈률

이탈률을 줄이는 것은 진입점이나 탐색용으로 주로 설계된 페이지를 테스트하는 경우 실행 가능한 목표가 될 수 있습니다.

CTA에 대한 클릭률

전용 랜딩 페이지 또는 제품 세부 정보 페이지가 있는 경우 전환 지점에 대한 CTA 클릭률을 높이십시오. 이는 궁극적으로 더 나은 판매로 이어집니다.

그러나 여기에는 약간의 주의 사항 이 있습니다. CTA가 여러 개이고 이윤 마진이 다른 제품 구매로 이어지는 경우 이를 고려해야 합니다. 평균 주문 가치를 낮추면서 CTA 클릭률을 높이는 것이 가능합니다.

테스트는 얼마나 오래 실행해야 합니까?

일반적으로 분할 테스트는 승자가 확률에 따라 선택되지 않았다는 90% 또는 95% 신뢰도로 결과를 얻을 때까지 실행해야 합니다.

95 percent confidence level graphic

해당 레벨에 도달하려면 다음 두 가지 중 적어도 하나가 필요합니다.

  • 결과를 빠르게 전달할 수 있도록 매우 높은 데이터 전송률
  • 테스트 중인 페이지를 많이 방문하지 않아도 신뢰할 수 있는 결과를 얻을 수 있도록 테스트를 오랜 시간 동안 그대로 두십시오.

테스트를 오래 실행할수록 계절적 트래픽 위험이 높아집니다. 또한 사이트에서 얻는 방문자 유형 및 기타 요인 집합의 변경 사항에 노출됩니다. 이것이 일반적으로 CTA에 대한 반송 또는 클릭률에 관계없이 많은 트래픽이 발생하는 경향이 있는 페이지를 테스트하는 것이 좋은 이유 중 하나입니다.

한 가지 기억해야 할 점은 도구가 적절한 수준의 통계적 유의성을 가진 결과를 생성하는 즉시 테스트를 종료한다는 것입니다. 검색 엔진 패널티와 같이 실행 중인 것으로 결론지어야 하는 테스트를 그대로 두면 추가 위험이 따릅니다.

분할 테스트는 SEO에 위험을 수반합니까?

분할 테스트는 약간의 검색 엔진 최적화 위험을 수반하지만 분할 테스트의 기술적 측면을 잘못 이해한 경우에만 가능합니다.

  • 도구가 결과를 생성한 후에도 테스트를 무기한 실행 상태로 두면 검색 엔진에 불이익을 받을 위험이 있습니다. 검색 엔진 스파이더는 일반적으로 사용자가 사이트를 크롤링할 때 보는 것과 동일한 것을 "보기"를 좋아합니다. 그리고 영원히 실행되는 분할 테스트는 기본적으로 이에 반합니다.
  • 챔피언 페이지 URL과 도전자 페이지 URL이 있는 경우 일반적으로 챔피언 페이지를 "표준" URL로 지정하는 것이 좋습니다. 사내에서 "rel=canonical"과 같은 도구에 익숙하지 않은 경우 분할 테스트가 모범 사례를 따르도록 이 도구를 사용할 수 있는 회사와 협력해야 합니다.

분할 테스트의 한계는 무엇입니까?

분할 테스트는 훌륭하지만 제공하기에 적합한 것보다 더 많은 것을 기대한다면 그 유용성의 한계에 빠르게 도달하게 될 것입니다. 분할 테스트는 일부 문제를 해결하는 데 좋지 않습니다.

글로벌 맥시멈 달성

분할 테스트를 통해 현재 웹사이트 디자인이 허용하는 최대값에 점진적으로 도달할 수 있습니다. 그 이상을 위해서는 웹사이트 재설계가 필요할 수 있습니다. 분할 테스트로는 얻을 수 없습니다.

기본적인 사이트 문제 수정

AB 테스트는 개별 페이지 개선에 좋은 경향이 있습니다. 메가 메뉴 문제 및 깨진 경로와 같은 대규모 문제가 있는 경우 분할 테스트는 큰 그림에서 큰 도움이 되지 않습니다.

전환 최적화 계획 부족

스플릿 테스트는 경영진이 시간이 있을 때 프로그램이 아니라 취미로 한 번 실행됩니다. 약간의 이득은 얻을 수 있지만 일반적으로 적절한 전환율 최적화 계획에서 볼 수 있는 추진력은 얻지 못할 것입니다. 분할 테스트는 격리된 도구로 사용되지 않습니다. 분할 테스트가 포함된 CRO 프로그램이 필요합니다.

분할 테스트 함정 피하기

분할 테스트는 사람들이 이탈하는 경향이 있는 탐색 페이지든 CTA에 대한 클릭이 부족하여 비즈니스에 피해를 주는 사용자 지정 방문 페이지든 상관없이 사이트의 중요한 경로를 개선하는 좋은 방법입니다.

챔피언으로 원본 페이지를 갖고 도전자로 테스트 중인 아이디어가 있으면 데이터를 사용하면서 많은 논쟁을 해결할 수 있습니다. 이렇게 하면 웹사이트에서 작동하는 작업에 대해 부서 간 논쟁이 길어지는 대신 회사의 시간과 에너지를 절약할 수 있습니다.

즉, 몇 가지 함정을 피해야 합니다.

  • 사용성 테스트가 필요한 경우 분할 테스트를 사용하지 마십시오.
  • 사용자 승인 테스트가 필요한 경우 AB 테스트를 사용하지 마십시오.
  • 분할 테스트가 자동으로 적합하다고 가정하지 마십시오. 먼저 데이터를 살펴보십시오.
  • 사이트에 Google Analytics 스크립트와 같은 것을 추가할 수 없다면 분할 테스트를 사용하지 마십시오.
  • 테스트 중인 페이지에 대한 명확한 목표 없이 AB 테스트를 사용하지 마십시오.
  • 분할 테스트를 실행하는 데 필요한 시간보다 오래 두지 마십시오. 패널티 위험이 있습니다.
  • 분할 테스트 실행과 전환율 최적화 전략을 혼동하지 마십시오.

더 큰 전환 프로그램의 일부로 정기적인 분할 테스트를 시작하면 사이트에서 상당한 이득을 얻을 수 있습니다.

블로그 바닥글 Cta1