A/B 測試會損害您的業務嗎? 使用錯誤 A/B 測試工具的 4 種方式可能會損害您的業務
已發表: 2020-05-28
不要忽視您的 A/B 測試工具。 它們對於您的企業來說太重要了,不能僅僅將其視為您技術堆棧中的另一個 Martech 產品。
您如何分配營銷預算、您的網站獲得的流量、您的運營開銷大小以及被罰款 2000 萬歐元的可能性與您選擇的測試工具有很大關係。
所以,要注意這一點。
以下是錯誤的 A/B 測試工具會使您的公司虧損或面臨虧損風險的一些方式:
- 失去對優化目標的關注
- 寶貴流量的損失
- 運營成本增加
- 隱私和數據風險
- 結論
失去對優化目標的關注
多合一工具很方便——如果您需要所有這些功能。 但問題是,你很可能不會。 事實上,Gartner 2019 年的一項研究表明,英國和北美 42% 的營銷人員未充分利用他們的營銷堆棧。
因此,您會看到,從供應商的角度來看,許多新功能令人興奮。 它們非常適合營銷。 但是當涉及到優化器實際需要該工具的任務時,有哪些可用的功能?
瀏覽一個試圖做所有事情但什麼都做不好的工具的混亂 UI 有多容易?
當您獲得此類工具時,通常會有一個更有趣的問題:基本計劃包含可幫助您收集定性數據的功能。 但是在設置和運行測試時,您會遇到困難,因為您需要的功能現在被一個更昂貴的計劃所保留。
有時這就是企業計劃。 “好吧,讓我們花掉額外的錢。” 另一個問題是:定價是自定義的,現在您必須與銷售團隊通電話以確定您將支付多少。 最終變成了五個數字。
這還不是全部……
一體化測試平台降低了 A/B 測試的決策能力。 因為鼓勵用戶依賴熱圖、會話記錄等。歸根結底,這些並不能幫助您做出更好的營銷或開發決策。
以熱圖為例,它們並不能準確地告訴您用戶的注意力在哪裡,而只是鼠標指針在哪裡。 這就是為什麼 Peep Laja 將其稱為“窮人的眼球追踪工具”。
試圖將人們使用鼠標的方式與他們關注的地方聯繫起來會導致判斷不准確。
谷歌的研究表明:
- 94% 的人顯示鼠標移動和眼球追踪之間沒有垂直相關性
- 81% 顯示鼠標移動和眼球追踪之間沒有水平相關性,並且
- 10% 的人將鼠標懸停在鏈接上,然後繼續閱讀頁面上的其他內容
現在問問自己:你的眼睛在鼠標指針的位置嗎?
熱圖並未被證明有助於衡量和表示風險。 當然不是決策。 它們實際上被證明會導致錯誤和混亂。
所以,最後,它甚至不是有用的定性數據。 它浪費了投資並減慢了目標的實現。
要提高生產力和效率,您需要的是一種工具,它可以做您想做的事情而不會造成混亂。 Gartner 還證明,使用集成套件方法進行營銷技術的營銷人員在實現營銷目標方面的效率僅為 28%,而選擇完全滿足其獨特需求的工具的營銷人員則為 45%。
您需要一個 A/B 測試工具,為您和您的團隊配備從頭到尾執行複雜測試所需的所有功能 - 在您現有的計劃中。
這就是 CRO 機構 Mintminds 在面臨改進電子商務品牌產品頁面的挑戰時所做的。
他們評估了熱圖,發現人們關注了頁面上的某些部分。 他們用它開發了 4 個頁面變體,使訪問數據顯示人們正在尋找的信息變得更容易。
然後他們在 Convert Experiences 上設置了測試並運行它。 結果? 沒有人能打敗控制,相反,所有 4 人的轉化率都下降了。
他們做的下一件事是轉向用戶研究。 根據他們挖掘的洞察力,他們這次為頁面創建了一個新變體,並提出了不同的假設。 他們對對照運行了 28 天,得到了不同的結果。
加入購物車的比率比對照高 13%,訂單轉化率上升 4.96%,每位訪客的收入增加 6.58%。
正如全文頁面上的標題所說,“沒有上下文的數據具有誤導性。”
寶貴流量的損失
就像人流量對實體店很重要一樣,網絡流量對在線公司也很重要。 全球有超過 45 億人使用互聯網。 這些人是大多數在線營銷活動的目標。 公司使用 SEO 和 PPC 來吸引網絡流量到他們的網站,希望賣給他們。 這些技術非常有效且需求旺盛,2017 年 PPC 支出超過 100 億美元,而 SEO 服務預計今年僅在美國就達到 800 億美元!
您的團隊可能正在使用 SEO、PPC 甚至兩者來為您的網站增加流量。 如果您使用了錯誤的 A/B 測試工具,您在增加流量上所花費的努力和資源可能都是徒勞的。
A/B 測試工具並非生來平等。 有些可能會影響您網站的加載時間。

頁面速度很重要,因為它會影響轉化率、自然排名和用戶體驗。 在頁面上進行測試時,您的 A/B 測試工具會增加頁面加載時間。 由於您頁面上的額外腳本以及提供新變體的時間。
谷歌的一項研究發現,移動頁面速度的第二次延遲可以將轉化率降低多達 20%。 隨著超過 30 億人使用智能手機訪問互聯網,更快的移動頁面速度比以往任何時候都更加重要。

您的 A/B 測試工具可能會花費您來之不易的流量的另一個領域是原始內容的閃現 (FOOC)。
這也稱為測試中的閃爍。 當測試頁面的訪問者在加載測試變體之前看到原始頁面時,就會發生這種情況。 它發生在一瞬間。
一些測試工具會異步加載它們的腳本,以減少它們對頁面速度的影響。 但這會導致閃爍。 如果遊客繼續經歷這種情況,他們就會離開,因為沒有人喜歡未經許可接受測試。
如果他們注意到閃光但沒有離開,這可能會影響測試的完整性,因為他們現在知道發生了什麼。
Convert Experiences 等 A/B 測試工具及其 SmartInsert 技術不僅可以消除閃爍,而且對頁面加載速度的影響也很小。
它是這樣工作的:當網頁通過安裝在網站上的 A/B 測試工具腳本加載更改時,導致閃爍的 A/B 測試工具在訪問者的瀏覽器中應用更改。
同時,我們開發的技術作為瀏覽器和網站之間的層加載。 這樣,更改是可見的,而原始內容是隱藏的。
當原始內容加載速度快於變體時,您會看到閃爍。 這意味著錯誤的版本首先到達終點線。
據麻省理工學院的神經科學家稱,人腦識別圖像只需 13 毫秒。 閃爍可以持續長達 100 毫秒到一整秒。
使用轉換體驗,您想要的版本總是首先到達終點線。 無閃爍測試,因此您不會丟失流量並損害您的測試結果。
運營成本增加
無論是財富 500 強公司還是夫妻店,降低運營成本是每個企業的目標。 無論是減少非生產時間、中斷還是勞動力成本,企業都希望降低間接成本。
當您每週花費數小時在電話上試圖聯繫正確的支持代理以解決您的測試工具問題時,這可能很難實現。 花在電話支持上的時間會降低您的整體生產力並花費您的公司資金。 蓋洛普報告稱,生產力低下每年使全球公司損失 7 萬億美元。
人工成本佔企業運營成本的 70%。 每次您將開發人員從他們的職責中拉出來,並將他們與復雜的測試工具設置捆綁在一起時,您都在推高運營成本。 考慮一下花費的加班費,以便開發人員可以將您的新 CRO 工具與您當前的 Martech 堆棧集成。
需要大量開箱即用的開發資源和無響應的支持代理的測試工具將顯著增加您的運營成本。
相反,您的策略應該是合理地花費在工具上,並將剩餘的預算投資於強大的優化團隊。 您的 A/B 測試工具每年不應花費 100,000 美元。
工具僅此而已,工具。 如果沒有人使用它,它也可以放在展示玻璃中。 大多數優化專家都同意這一點,這就是為什麼在 LinkedIn CRO 社區中有一個完整的#TeamOverTools 活動。
優化人員可以使用像 Convert Experiences 這樣足夠強大的工具來產生收入驅動的結果,該工具的支持速度提高了 4 倍,以幫助您的團隊做得更好。
與其每年訂閱 6 位數的 A/B 測試工具,不如將您的資金重新投入到團隊中。 投資於創建您的假設、推進您的實驗文化並使用工具來提取驅動您的業務決策的洞察力的人。
該工具只能與使用它的人一樣好。 當然,工具很重要,但工具本身並不能運行您的優化程序。 人們會。 沒有人,你將無處可去。
隱私和數據風險
今天的世界更加註重隱私。 保護技術用戶隱私的法律法規如雨後春筍般湧現。
當今影響最大的 3 項決策並導致科技行業處理數據和分析的方式發生重大轉變:
- 通用數據保護條例 (GDPR)
- 關於隱私和電子通信的隱私和電子通信指令,也稱為 ePrivacy 指令
- 加州消費者隱私法 (CCPA)
例如,在 A/B 測試中,GDPR 明確規定,在世界任何地方處理歐盟公民數據的每個人都必須遵守 GDPR。 在處理任何此類數據之前,您必須獲得同意,說明數據處理的目的,並便於撤回此同意。
實際上,這將
- 影響您可以為 A/B 測試收集的數據量,
- 縮短 cookie 生命週期存儲限制,
- 將測試人群限制在那些沒有在瀏覽器上激活“請勿跟踪”的人,等等。
此外,ePrivacy 指令要求匿名訪問者的 ID、不存儲和處理最終用戶的個人數據、針對地理位置和時區請求同意等。
當然,這帶來了一些主要問題,因為違約的罰款感覺不僅僅是在手腕上打耳光。
如果按國家/地區劃分,這個數字會上升。 在美國,遭受數據洩露的企業的成本為 819 萬美元。
隨著歐盟數據保護法 (GDPR) 的實施,數據洩露的成本現在要高得多。 處理來自歐盟公民的任何數據的公司必須完全遵守 GDPR,以免面臨巨額罰款。
2019 年,法國數據保護機構因數據洩露對谷歌罰款 5700 萬美元。 就在最近,西班牙一家小型咖啡館因違反 GDPR 的一部分而被西班牙數據監管機構 AEPD 罰款 1,500 歐元。
實驗工具收集有關訪問者看到您的變體的數據。
這些數據是匿名的嗎? 它是否完全符合 GDPR 標準?
如果您的 A/B 測試工具收集和存儲訪問者的個人身份信息(尤其是來自歐盟的訪問者),它可能會使您的企業面臨罰款,罰款金額可能從數千美元到數百萬美元不等。
符合 GDPR 的測試工具是確保您的企業在發生數據洩露時在收集、存儲和處理訪問者數據方面不承擔任何責任的唯一方法。
現在,您不必在 A/B 測試之前獲得同意。 但不要交叉手指祈禱這不會發生。 如果您覺得是時候保持隱私法的安全,請轉向轉換。
Convert Experiences 是實驗隱私領域的領導者。 因此,您可以依靠我們的工具來遵守所有法規並適應隱私法規的變化。 當我們步入一個沒有 cookie 的未來時,請獲得一個測試工具,該工具將與您的團隊一起成長,並使您的優化程序保持最佳狀態。
結論
錯誤的 A/B 測試工具不僅會花費您的公司資金,還會花費您的時間並使您的公司承擔責任。 如果您發現自己處於這種情況,則應該切換到更好的工具。 您需要一種可以根據您的需求定制的工具,該工具對頁面速度的影響最小,並且比行業平均支持響應速度快 4 倍。
該工具有一個名稱:轉換體驗。 免費試用 15 天。 不需要信用卡。
