簡而言之(相當大)的拆分測試基礎知識

已發表: 2018-08-27

簡而言之,拆分測試基礎知識

在深入了解拆分測試的基礎知識之前,讓我們先弄清楚一些誤解

  • 拆分測試很昂貴。
  • 他們需要大量的技術知識。
  • 它們需要大量的設置時間。

如果這就是阻止您的團隊運行 A/B 測試的原因,那麼您絕對應該開始。

使用 Google Content Experiments 等基本免費工具設置測試需要幾分鐘時間(儘管 Google 現在推薦 Optimize 作為他們的測試平台)。

拆分測試的技術專長也是一個較低的門檻。 如果您有人可以為網站插入 Google Analytics 腳本,那麼您就有可以為測試代碼插入類似腳本的人。

您應該擔心的不是技術方面,而是其他一切。 拆分測試應該是多層轉換優化計劃的一部分。 要以這種方式使用它,您需要了解如何正確使用拆分測試。

為什麼公司應該使用拆分測試?

  • 如果您希望啟動網站的新頁面或部分,或者改善購物車的流程,或者找出人們沒有做他們需要做的事情的原因,您不需要拆分測試。 你需要一個可用性測試。
  • 如果您希望確保功能在啟動時不會出錯,從而導致轉化率下降,則不需要拆分測試。 您需要依靠用戶驗收測試。

在最基本的層面上,當您對如何顯示重要頁面有兩個相互競爭的想法時,您將需要進行拆分測試。

split test-champion vs challenger-graphic

潛在的假設是,您應該有一個定期提出這些想法的過程。 您不應該將拆分測試工作與其他在線營銷工作完全分開。

什麼是拆分測試?

拆分測試的基本組件是冠軍頁面和挑戰者頁面:

冠軍

傳統上,這是一個高流量頁面(因此值得修復),具有高跳出率或低轉換率(因此需要挑戰者頁面)。

挑戰者

這通常是一個類似于冠軍的頁面,但根據有關如何改進頁面的理論進行了一些調整。

通常發生的情況是,一半的流量被發送到冠軍頁面,另一半進入挑戰者頁面。 跳出率或點擊率等一些指標會被測量,隨著時間的推移,其中一個頁面會獲勝。

split test flow diagram

MVT呢?

多變量測試 (MVT) 是拆分測試的近親。

多變量測試不是在兩個頁面之間測試一個變量(例如號召性用語的位置或首屏是否存在信任符號),而是在多個頁面之間拆分流量,同時測試元素的不同組合。

multivariate test flow diagram

有一個更高的流量欄需要清除以進行有效的多變量測試,但如果您有一個高流量的網站,與為同一頁面運行多個拆分測試相比,它可能是測試多個變量的更有效方法。

如果您剛剛開始,暫時不要太擔心多變量測試。 在最關鍵的頁面上進行拆分測試會物有所值。

拆分測試需要什麼?

開始拆分測試並不需要太多,但您確實需要考慮兩件事:

拆分測試工具

如果您沒有拆分測試的經驗,免費版的Google Optimize可能是一個不錯的起點,因此您可以查看它是否符合您的需求。

當您達到使用該工具的上限時,您可以考慮使用付費工具。 您可以從 Optimizely 或 VWO 等工具獲取演示。

交通/季節性

您希望盡可能確保站點的流量在測試期間不會發生劇烈變化。 這意味著如果您的流量在假期期間發生劇烈變化,或者您預計流量構成會發生變化,則拆分測試的可靠性將降低。

avoid seasonality graphic

有哪些公司不應該進行拆分測試?

在您實際運行測試之前,請確保您正在測試可以通過拆分測試實際改進的區域,並且您擁有運行測試的內部資源或可行的第三方來幫助您進行 AB 測試。

  • 如果您沒有安裝 Google Analytics 或類似工具來尋找可行的頁面進行測試,您可能希望延遲運行 AB 測試。
  • 不要測試存在嚴重錯誤的區域。 在運行測試之前先解決大問題。
  • 如果您每月進行基於流量的拆分測試的訪問次數少於 10,000 到 20,000 次,或者每天的轉化次數少於 10 次,則 AB 測試可能還不適合您的組織。
  • 如果您沒有人插入腳本,並將測試的獲勝者設為網站上的官方版本,您可能希望推遲舉行測試。

你如何找到要測試的頁面?

有一些東西可以幫助你找到要測試的主要頁面:一個網絡分析工具、一個調查工具,以及一些關於如何使用這兩者的基本技巧。

網絡分析

從您的網絡分析工具中,您需要過濾到高流量頁面,因此該頁面值得改進。 但是,如果您找到人們不採取行動的高流量頁面,這也會有所幫助,因此您知道自己還有很大的改進空間。 這兩件事往往沒有那麼好相關,所以你必須挖掘一下才能找到那個交叉點。

如果您的網絡分析工具是谷歌分析,您可以使用稱為加權排序的便捷功能來查找該交叉點內的頁面,從而使搜索頁面更容易一些。

民意調查

通過您的調查工具,您需要了解人們正在嘗試執行的任務,以及他們在這些任務中的成功程度。 您需要在網站調查中包含一些問題,但最關鍵的問題是:

  • 您在網站上尋找什麼?
  • 你找到你要找的信息了嗎?

在網絡分析工具中,您會在調查中找到高流量、低交互頁面的位置,您需要找到兩件事的交集

  • 人們最關心的任務
  • 他們經常失敗的任務

找到該交叉點後,您可以在該部分中找到要測試的關鍵頁面。

您應該測試哪些元素?

一旦您根據來自工具或業務優先級的數據確定了“冠軍”頁面,您就需要形成一個關於如何改進頁面的理論。 您可以嘗試以下幾件事:

  • 標題。 嘗試在挑戰者頁面上使其更清晰。 或者,如果來源在您的控制之下(電子郵件、AdWords 等),則使其與流量來源相匹配。
  • 圖像。 盡量讓它是真實的(而不是庫存照片)。 如果它是一張臉,讓它看向號召性用語以引導用戶的注意力。
  • 號召性用語 (CTA) 。 嘗試不同的位置。 或者嘗試添加與網站其餘部分使用的調色板的對比,使其脫穎而出。
  • 表單域。 嘗試減少挑戰者頁面上的字段數量。

我應該尋找什麼結果?

您可以為拆分測試建立幾種不同的目標,具體取決於它是什麼類型的頁面。

跳出率

如果您正在測試一個入口點或主要用於導航的頁面,那麼降低跳出率可能是一個可行的目標。

點擊到 CTA

如果您有專門的登錄頁面或產品詳細信息頁面,請使用增加的 CTA 點擊次數來獲得轉化點。 這最終會帶來更好的銷售。

但是,這有一個小警告:如果您有多個 CTA,並且它們導致購買具有不同利潤率的產品,您應該考慮到這一點。 可以在降低平均訂單價值的同時增加 CTA 點擊量。

測試應該運行多長時間?

通常,拆分測試應該運行,只要它需要獲得 90% 或 95% 的置信度的結果,即獲勝者不是基於機會被挑選出來的。

95 percent confidence level graphic

達到這個水平至少需要以下兩件事之一:

  • 非常高的數據速率,因此您可以快速交付結果
  • 長時間保持測試,這樣即使被測試的頁面訪問量不大,也可以獲得可靠的結果

運行測試的時間越長,季節性流量風險就越高。 您還將接觸到您的網站獲得的訪問者類型集和其他因素的變化。 這就是為什麼測試那些往往會獲得大量流量的頁面通常是個好主意的原因之一,而不管反彈或點擊到 CTA 的情況如何。

需要記住的一件事 - 一旦您的工具產生具有正確統計顯著性水平的結果,就結束您的測試。 通過讓應該已經結束的測試運行,例如搜索引擎懲罰,您會冒額外的風險。

拆分測試是否會給 SEO 帶來任何風險?

拆分測試會帶來一些小的搜索引擎優化風險,但前提是您將拆分測試的技術方面弄錯了。

  • 如果即使您的工具產生了結果,您仍讓您的測試無限期地運行,您可能會遇到搜索引擎處罰。 搜索引擎蜘蛛通常喜歡“看到”用戶在抓取網站時看到的相同內容。 永遠運行的拆分測試基本上與此背道而馳。
  • 當您有一個冠軍頁面 URL 和一個挑戰者頁面 URL 時,將冠軍頁面指向為“規範”URL 通常是一種很好的做法。 如果您不熟悉內部“rel=canonical”之類的工具,請確保您與可以使用它的公司合作,以確保您的拆分測試遵循最佳實踐。

拆分測試的局限性是什麼?

雖然拆分測試很棒,但如果您對它的期望比它適合提供的更多,那麼您很快就會達到它的實用性的上限。 拆分測試不能很好地解決一些問題:

達到全局最大值

拆分測試將逐步使您達到當前網站設計所允許的局部最大值。 除此之外,您可能需要重新設計網站 - 拆分測試不會讓您到達那裡。

修復基本站點問題

AB 測試往往有利於個別頁面的改進。 如果您遇到大型菜單問題和路徑損壞等大規模問題,拆分測試不會對您有很大幫助。

缺乏轉化優化計劃

當管理層有時間將拆分測試作為一種愛好而不是程序時,它會在藍月亮中運行一次。 您將獲得一些收益,但您不會獲得通常從適當的轉化率優化計劃中看到的動力。 拆分測試作為一個孤立的工具不會走得太遠——您需要一個包含拆分測試的 CRO 程序。

避免拆分測試陷阱

拆分測試是改善網站關鍵路徑的好方法——無論是人們傾向於跳出的導航頁面,還是缺乏點擊 CTA 會損害業務的自定義登錄頁面。

當您將原始頁面作為冠軍並將您正在測試的想法作為挑戰者時,您可以在使用數據時解決很多爭論。 這節省了公司的時間和精力,而不是在部門間就網站上的工作原理進行曠日持久的爭論。

也就是說,您確實需要避免一些陷阱:

  • 當您需要的是可用性測試時,不要使用拆分測試。
  • 當您需要的是用戶驗收測試時,不要使用 AB 測試。
  • 不要假設拆分測試自動適合您。 先看看你的數據。
  • 如果您無法將諸如 Google Analytics 腳本之類的內容添加到站點,請不要嘗試使用拆分測試。
  • 如果您正在測試的頁面沒有明確的目標,請不要使用 AB 測試。
  • 不要讓拆分測試運行的時間超過它們需要運行的時間。 存在罰款風險。
  • 不要將運行拆分測試與轉換率優化策略混淆。

如果您開始將定期拆分測試作為更大轉換計劃的一部分,您可以為您的網站獲得相當可觀的收益。

博客頁腳 Cta1