如何在低流量網站上進行 A/B 測試

觸發警告：

我們知道圍繞統計顯著性、95% 的神話（或不是？）標記、測試和流量等存在大量爭論。

如果你是一個對這些東西有強烈感覺的優化器，你可能會被觸發。 好吧，評論是開放的，我們可以進行一次非常有啟發性的對話。

讓我們開始！

測試不適用於低流量網站。

這是肯定的。

因為要獲得具有統計意義的見解，您需要向（至少）數千名用戶展示您的實驗變體。

事實上，在 Convert Experiences，我們經常建議我們的用戶運行 A/B 測試——這是最簡單的 CRO 實驗——前提是他們可以為每個變體發送大約 1 萬訪問者。

此外，我們建議記錄大約 1000 次轉化，以產生對照或變體優越性的確鑿證據。

這解釋了為什麼 CRO 不是百萬客戶類型的市場，因為只有少數 10 萬個網站（或企業）有足夠的客流量來測試任何成功以及昂貴（迅速發展的“企業”）優化解決方案的預算！

低流量站點應該排除測試嗎？

鑑於一般小型企業的網站每天只有幾百個訪問者，A/B 測試實驗對他們來說沒有意義。

但：

這並不意味著小企業根本無法進行實驗。

事實上，即使是小企業也可以進行許多實驗。

運行它們有很多好處。

例如，如果您擁有一家小型企業，運行實驗將幫助您從基於直覺的決策轉向數據驅動的決策。 它將迫使您查看數據……並且通過面對面的數字，您將不再默認使用 *我認為* 策略。 這種數據支持的方法將改變您建立和發展業務的方式。

進行實驗也會教你通過嘗試而不是接受現狀來學習。 它會啟發你看看這些被認為有效的原則是否真的對你有用。

最後，當您擁有“足夠的”​​流量時，運行實驗將為您準備一些“真正的”CRO，因為它有助於培養正確的測試心態——有效 CRO 的先決條件。

因此，開始在您使用的任何營銷渠道上進行任何實驗。 以下是您的一些選擇。

使用電子郵件進行測試

令人驚訝的是，電子郵件營銷是一種讓您嘗試不同想法的渠道，而無需大量訂閱者（或“聯繫人”）。

“誰說的？”

從 MailChimp、ConstantContact 和 Campaign Monitor 到 HubSpot（在其營銷自動化軟件中支持電子郵件營銷），每個電子郵件營銷軟件提供商都表示。

讓我們從 HubSpot 開始。

因此，如果您想使用 HubSpot 的電子郵件平台運行 A/B 測試，您只需要 1,000 個聯繫人： 1,000 個聯繫人也是我們對電子郵件發送樣本運行 A/B 測試的基準。 — HubSpot

Campaign Monitor 還表示，即使是小型電子郵件列表，您也可以運行 A/B 測試。 這是它背後的數學原理：

現在，您可能會想，“我的列表大小只有 500 個訂閱者，您希望我如何運行成功的測試？” 我的回答是，您需要將目光投向更大的 MDE [最小可檢測效應 (MDE)]。 當您增加 MDE 時，您所需的樣本量會減少。 因此，每個變體不需要 592 個訂閱者來檢測 20% 的相對效果，而每個變體只需要 94 個訂閱者來檢測 50% 的相對效果。 請注意，基準轉化率也會影響您的樣本量——轉化率越低（在本例中為開放百分比），您需要運行準確測試的訂閱者就越多。 — 活動監視器

因此，如果您有大約 500 或 1000 個訂閱者，那麼您可以進行測試，前提是您有一個對您要說的內容感興趣的響應式數據庫。

但是，一些電子郵件營銷提供商建議使用稍高的聯繫基礎。

例如，電子郵件營銷解決方案提供商 ConstantContact 建議將樣本量提高到 HubSpot 允許的最小量的兩倍。 它表明，對於有意義的 A/B 測試，樣本量必須至少為 1,000 個聯繫人。 因此，如果您有 2000 個訂閱者，您應該可以很好地進行測試（您的 A 和 B 版本各獲得總聯繫人的 50% 作為測試流量）。

對於主題行測試，我們建議盡可能在至少 1,000 個聯繫人的樣本大小上測試每一行。 每個版本的 1,000 個用戶通常是任何 A/B 測試的良好基準，但如果您沒有足夠的聯繫人或訪問者來達到這些數字，那麼仍然值得進行測試。 —常量聯繫

MailChimp 還建議使用更大的列表來運行 A/B 測試。 它建議您必須至少有 5,000 個聯繫人才能運行測試。 但是由於許多小型企業的聯繫人基​​礎比這要小得多，因此建議在完整列表中測試想法：

我們建議您將組合發送給至少 5,000 個訂閱聯繫人，以便從您的測試中獲取最有用的數據。 如果您的列表或細分的大小不允許每個組合中有 5,000 個訂閱者，請考慮測試您的整個列表並使用活動結果來為未來的活動內容決策提供信息。 — MailChimp

雖然擁有龐大的樣本量確實可以幫助您更快地達到統計顯著性（並且更有信心），但您也可以開始使用您的小列表進行測試！

這裡有 150 多個電子郵件拆分測試想法，適用於您的電子郵件活動。

此外，這裡是電子郵件 A/B 測試的快速指南。

使用社交媒體進行測試

社交媒體是另一個讓你測試你的想法的渠道，不管你的社交關注度有多小。 此外，在某種程度上，在社交媒體上，沒有什麼能真正限制你的影響力。

例如，在 Convert Experiences，即使我們沒有數以萬計的追隨者，但我們出色的社交賣家仍在不斷嘗試我們社交媒體副本的元素，例如其標籤、圖像等。

她的測試為我們帶來了一些偉大的勝利。 例如，她使用一組特定標籤的實驗曾經為我們贏得了 Google Analytics 的轉發！

現在，這是一些社交媒體曝光，不是嗎？

您可能會說，由於（也許）僥倖而忽略快速獲勝很容易，但是當您看到一組主題標籤通常比您測試它的其他標籤獲得更多曝光時，您擁有的不僅僅是測試結果……您擁有的是一種趨勢.

您可以運行大量社交媒體 A/B 測試來發現此類趨勢並提升您的社交媒體表現。 我們在這裡發布了關於社交媒體 A/B 測試的精彩入門。 閱讀它以了解如何從社交媒體 A/B 測試開始、可以運行的不同社交媒體 A/B 測試以及必須牢記的頂級社交媒體 A/B 測試最佳實踐。

使用付費廣告 (PPC) 進行 A/B 測試

就像電子郵件和社交媒體營銷渠道一樣，PPC 營銷渠道還可以讓您嘗試廣告文案和廣告活動的所有其他元素。

無論是 Google Adwords 還是 Facebook 廣告，大多數付費網絡都支持實驗，因此您可以獲得最高的 ROI。

但是要從您的 PPC 實驗中獲得具有統計意義的結果，您需要對每個廣告文案進行數千次展示。 Google 建議測試每周至少獲得 5000 次展示的廣告組。

那麼幾千次廣告展示的成本是多少？

這在很大程度上取決於平台和行業（以及其他因素），但有數據可以幫助您進行預算。

例如， AdStage 在 2018 年第一季度分析了超過 1.1 億次廣告展示（在 Google Adwords 上），發現平均需要 116.91 美元才能在 Google Ads 上獲得一千次展示 (CPM)。 去年，它便宜了大約 13% 。

Facebook 等社交媒體網絡也提供可訪問的 CPM 選項。

來自 Statista 研究的數據表明，Facebook 的平均 CPM（每千次展示費用或每千次展示費用）為 1.26 美元。 AdExpresso 和 WordStream 的其他 Facebook CPM 平均成本估計在 7-10 美元範圍內。

問題是即使預算有限，您也可以開始測試廣告文案。

一種（幾乎）“交通證明”的實驗方式：個性化

根據您對訪問者的了解，個性化或個性化訪問者的網站體驗是另一種常見的實驗形式。

個性化最好的部分是即使是低流量的網站也可以使用它們，因為適用於 CRO 測試的流量限制不適用於個性化。

這背後的原因是，通過個性化，最終目標不是優化轉化率。 相反，它的目標是提供更相關的用戶體驗，從而帶來更多的轉化或更高的客戶滿意度和保留率。

例如，您可以創建不同版本的產品頁面來展示給您的客戶和非客戶（或潛在客戶）。

在您的客戶產品頁面上，您可以顯示產品指南和視頻、訪問支持的快速鏈接等內容，以便他們獲得更有價值的產品體驗。 而您向潛在客戶展示的版本（例如，那些註冊試用的人）可以專注於您的產品功能或案例研究以幫助他們轉換。

大約 93% 的公司通過個性化實現了更好的轉化。

您可以立即開始個性化。

此外，借助 Convert Experiences 等工具，您可以在幾分鐘內設置個性化的網站體驗。 只需設置定位規則，您就可以向不同的受眾群體展示個性化的信息——促使每個群體進入他們購買旅程的下一個階段。

把它包起來……

雖然網站流量低可能會限制您進行實質性 CRO 實驗，但它不能阻止您“學習”。

這就是重要的——因為一旦你通過嘗試而不是接受規範將注意力轉移到學習上，你就會開始培養實驗文化，這是有效 CRO 的先決條件。

無論您處於哪個成長階段，您都可以投資於發展測試文化。 當您的網站實際上有足夠的流量進行核心、權威的 CRO 實驗時，它會派上用場。