實際假設構建:專家的做法

已發表: 2019-08-16
實際假設構建:專家的做法

什麼是假設?

對問題提出的解決方案,其有效性需要評估。

為什麼假設對您的優化程序至關重要?

對改進的內在渴望是驅動優化程序的動力,但僅僅為了測試而測試是失敗的設置。 實驗需要一個決定成功的主要目標。

提出一個假設迫使我們思考這個目標是什麼,我們應該如何努力實現它,以及要尋找什麼結果。 一個好的假設提供了結構。

一個糟糕的假設會造成混亂; 垃圾進垃圾出。 假設是實驗的基礎,它包含構建拆分測試所需的所有信息。

您如何構建拆分測試假設?

拆分檢驗假設的三個主要組成部分:理解、響應和結果

為了使組件易於記憶,它們遵循我們所有人都非常熟悉的 CRO 首字母縮寫詞。

每個組件由兩到四個簡短的書面片段組成,描述通過研究、設計和測量收集的數據。 將這些片段組合成句子,你就建立了一個可靠的假設。 這是一個示例,每個數據片段都以粗體標記:

  • 理解:通過比較過去 6 個月的購買數據,我們觀察到多件商品的購買量有所減少
  • 回應:我們希望在手機的購物車頁面通過在線追加銷售來推廣配對產品,以供購物車中已有商品的返回用戶使用
  • 結果:這應該會導致單品購買者更容易找到和購買互補產品,這將通過平均訂單價值 (AOV)來衡量,並由平均訂單規模、多品購買數量、訂單轉化率和收入來支持。

您可以看到每個片段如何描述從研究中收集、通過設計提出的重要數據或概述測量標準。

組合在一起,它們被解讀為一個完整的假設。 現在,讓我們深入研究每個組件。

理解

理解來自研究; 它正在識別和理解您想要利用的問題。 例如:“ 90% 的用戶在第 3 次輸入後就放棄了註冊表單。” 理解由兩個片段組成:觀察和觀察方法。

觀察

要識別問題,首先必須觀察它。 挖掘一些數據並弄髒你的手。 查找有關您的網站的某些內容不如您希望的那樣好。 研究的兩個主要途徑是分析和反饋。 分析是大規模的數字、定量數據; 通常是被動收集以供以後聚合的數字統計數據。 反饋是積極收集並代表用戶行為的描述性軼事數據。

觀察方法

您用來識別問題的工具、技術或過程。 將觀察方法納入假設有助於證明您進行了研究。 每種研究的觀察方法示例包括:

分析

  • 技術:熱圖、頁面漏斗、會話重播
  • 工具:谷歌分析、SessionCam、FullStory

反饋

  • 技術:調查、可用性測試、產品評論
  • 工具: Hotjar、Qualaroo、TurnTo

回复

響應來自設計; 它正在提議並針對您想要進行的更改。 通常,這可以從一個問題開始,例如“如果我們在類別網格顯示中增加產品圖像的大小會發生什麼?”

反應是你實驗的“肉和土豆”; 將在拆分測試軟件中配置的核心。 形成響應的片段是:變體、位置和受眾

變化

提出的改進是什麼。 這是實驗的理論部分。 無論您認為任何更改都會勝過網站的當前狀態,無論大小:按鈕上更強大的號召性用語文本、更大的圖像、減少表單輸入、重新設計的標題導航。 你明白了; 簡短描述您超越基線的想法。

地點

實驗將在您的網站上進行的位置; 頁麵類型、URL 定位、設備範圍和/或屏幕斷點。

觀眾

誰應該看實驗; 有關提供有意義的行為反饋的用戶狀態的具體細節。

響應的片段是您如何確定實驗範圍和微調結果數據的信噪比。

例如,如果變體正在改變電子商務網站的估計訂單總數的位置,則目標可能是購物車頁面,然後受眾將只是購物車中有商品的用戶。 您不希望從與空購物車頁面交互的用戶那裡收集數據,因為他們無論如何都不會看到顯示購物車總數的 UI 元素。

正在尋找一種 A/B 測試工具,讓您在定位和受眾構建方面變得非常成熟? 查看 Convert Experiences 的功能。

結果

結果來自測量; 這就是定義和評估成功的方式。 結果的片段是:期望的行為改變、主要 KPI 和次要 KPI

期望的行為改變

您希望由響應引起的用戶行為變化; 要么鼓勵積極的行動,要么阻止消極的行動。

主要 KPI

決定實驗成功或失敗的指標。 測量實驗試圖影響的用戶操作。 實驗存在的理由。

次要 KPI

備份主要 KPI 的指標。 這些可以幫助您充實主要 KPI 所講述的故事,和/或檢查意外的用戶行為。 次要 KPI 通常是目標區域和主要 KPI 終點之間漏斗的每個階段的轉換。

例如,如果您的主要 KPI 是來自訂單的收入,並且實驗針對產品頁面,那麼次要 KPI 將是添加到購物車、購物車瀏覽量、結帳瀏覽量和訂單轉化。

假設生成器

在 Corvus CRO,我們致力於構建小工具來幫助 CRO 專家的生活更輕鬆。 為此,我們構建了一個假設構建器,以幫助簡化和標準化拆分檢驗假設的構建。 它是一個 Web 表單,它為每個必要的片段輸入文本,並將它們組合成一個完整的假設。 您可以使用該工具來證明和建立自己的假設。 甚至還有一個“複製到剪貼板”按鈕,因此您可以輕鬆獲取您構建的假設並將其粘貼到您選擇的項目管理工具中。 我們希望您能像我們一樣充分利用該工具!

收集每個片段可能是一個耗時的過程,但回報是結構穩固的實驗,從長遠來看將提供更多的整體價值。

一盎司的預防勝於一磅的治療; 前期多做一點準備工作可以顯著減少後期的開銷。

羅盤
羅盤