2023年如何選擇A/B測試工具

您知道市場上有超過 50 種 A/B 測試工具嗎？

是的，就這麼多。

有這麼多選擇，你怎麼知道哪一個會在 2023 年滿足你的需求？

如果您希望滿足您的測試需求，您無需傾家蕩產或與類別領導者同行。 考慮一下您經常面臨什麼樣的優化挑戰——最適合您的 A/B 測試軟件應該符合您的需求和預算。

您如何從市場上的所有工具中縮小“那個”的範圍？

在這篇博文中，我們將概述您在做出決定時應考慮的因素，並分享我們對 2023 年最佳 A/B 測試工具的首選。

讓我們來幫助你！

但首先…

快速回顧：了解優化難題

這份實驗成熟度狀態報告確定了實驗成熟度的 4 個支柱。 這些是實驗的核心方面，可幫助各行各業的組織在擴展其計劃的同時在實驗中取得成功。

我們將在這裡學到的東西很有趣。 這些支柱是

1. 過程和責任：這包括構思和優先排序、實驗設計、如何衡量成功等的過程。
2. 文化：組織對實驗的總體態度是什麼？ 提供多少高級管理人員支持？
3. 專長：時間、資源和技能組合。 最後……
4. 工具和技術：為您的實驗提供動力的技術堆棧。

儘管這項研究是幾年前進行的，但基本面沒有改變。 工具只是優化難題的一小部分。

如果您閱讀本文是為了找到最好的 A/B 測試工具，它可以單槍匹馬地將您的測試程序從 0 提升到 100 或還好到很棒，那麼請考慮這是一個現實檢查。

那麼你的主要關注點應該是什麼？

可以說，在實驗成功方面，人員和流程佔了上風。 處於 CRO 遊戲頂端的品牌和代理商非常重視培訓。 你也應該這樣：

您應該對您的團隊進行投資，而不僅僅是作為 A/B 測試的最佳實踐； 對於希望將優化遊戲提升到新水平的組織來說，這通常是專家規定的優先事項。

該培訓超越了基本的 A/B 測試教程，還包括研究、數據收集和分析、批判性思維、實驗設計、統計、質量保證、利益相關者溝通等等。

讓我們在這個想法上加上一個大頭針，因為我們稍後會恢復它。

這種教育組合的一個流應該來自您的 A/B 測試供應商。 在為您的團隊尋找合適的工具時，請牢記這一點。

正確的工具將提供與了解哪些實踐和框架為高測試速度提供最高效率（這是許多實驗中最優秀的人，包括 Ronny Kohavi 和 Lukas Vermeer 推薦的項目目標）相對應的教育。特定的測試平台。

由於與您選擇的 A/B 測試軟件相比，人員和流程對程序的成敗具有更大的影響力，因此在行業中越來越受歡迎的一個想法是將 20% 的優化預算花在工具和依靠教育、招聘和運營。

例如，代理機構 WeTeachCRO 認為工具支出可以而且應該遠低於 20%：

傳統觀點認為，不要將超過 20% 的 CRO 總預算花在工具上，而將 80% 留給人們——畢竟人才是真正改變你的項目的人，而工具只是一個推動者。 但撇開這種“智慧”不談，我們的經驗是，大多數客戶可以（而且應該）花費遠低於 20%。

對於我們的大多數客戶來說，他們的工具成本低於 500 英鎊/月，而人工成本是其 10-15 倍，使他們更多地處於 5-10% 的範圍內。 從像谷歌優化這樣的免費工具開始應該會讓你起步，一旦你的測試複雜性超過了它的能力，就可以畢業到每月幾百磅的東西

WeTeachCRO 摘自每個有經驗的 CRO 必須問一次的 52 個問題

現在我們已經有了正確的心態，讓我們轉向購買 A/B 測試工具的下一個關鍵考慮因素。 特別是如果這是您第一次購買 A/B 測試工具。

如果沒有，您可以跳到概述您需要新工具的原因。

你有足夠的流量來測試嗎？

A/B 測試不適用於低流量網站。 在開始測試之前，您的網站必須有足夠的流量發送到您的 A/B 測試的每個變體。 如果沒有足夠的流量，您的實驗將無法達到統計意義，並且可能會運行很長時間。

在典型的 A/B 測試中，您需要為每個變體吸引成千上萬的訪問者。 在 Convert 中，我們建議為每個變體發送至少 5000 名訪問者和大約 1000 次轉化，以確定哪個變體是明顯的贏家。

前往 Convert 的 A/B 測試計算器，了解運行 A/B 測試需要多少流量、轉化次數和每筆收入的平均訂單量。 如果您缺少 A/B 測試所需的流量，請參閱我們的低流量測試指南。

整理好成功運行 A/B 測試所需的流量後，概述是什麼促使您獲得新的 A/B 測試工具。

從問題開始

弄清楚為什麼需要新的 A/B 測試工具。 這是不言而喻的，但有一個結構化的方法來做到這一點是至關重要的。 就是這樣：

找出您購買現有 A/B 測試工具的原因

如果您的堆棧中已經有一個測試工具，是什麼促使您使用它？

請注意這一點。 這是您的 A 點，將幫助您到達 B 點，這是您的下一個理想工具。 但我們會沿途停幾站。

包括客觀項目，例如平台的功能。 哪些吸引了您和您的團隊？ 哪些保留了您作為用戶？ 你特別喜歡這個供應商的什麼？

不要迴避深入挖掘。 可以理解的是，在我們的決策過程中存在強烈的情感因素，但為了推進可靠的優化計劃，您需要深入了解您當前的工具。

當你開始時你的程序在哪裡？

您是否剛開始進行 A/B 測試，只是想弄濕自己的腳？ 您是否聽說過關於增長營銷播客的網站優化，並向您推薦了此工具？ 或者您是否在使用免費工具並希望將您的測試擴大到超出其限制的範圍？

您希望通過工具獲取來移動哪些護欄指標？

Guardrail 指標旨在讓您與自己的目標保持一致。 當事情沒有按計劃進行時，它們會提醒您。

所以，你肯定得到了這個工具，因為你相信你可以改變一些東西。 它以前如何？ 收入？ 跳出率和訂單率等用戶體驗指標？

你最終實現了你的目標嗎？

如果不是，那為什麼？ 您的測試計劃是否有轉折？ 還是這個工具——GASP——買錯了？

誠實地回答這些問題，您就會清楚地了解問題。 這就是你的觀點A。

你完全沒發現問題嗎？ 或者您沒有部分或全部這些問題的答案？ 誰是真正的買家和重度工具用戶？ 與他們進行非正式交談將為您提供所需的答案。

因為你不想僅僅因為你有預算而有人想要一個花哨的新功能就改變工具。

功能幾乎不能解決問題。 他們最多只能幫助執行解決方案。 這種轉變對你來說應該是有意義的：

• 採用方面
• 供應商支持方面——如果您與現有供應商關係融洽，這意味著什麼。 它在旅途中有一個夥伴。
• 推出並按時間增加 — 適應新工具所浪費的天數是您將不會測試的天數，無論是完全測試還是滿負荷測試。

底線：當且僅當您知道移動將解決構成您已確定的問題的所有元素，以及堵塞漏洞並為您的人員和流程帶來額外價值時，才決定進行轉變。

如果這些花里胡哨能夠帶來真正的機會而不是趨勢，那麼該技術將趕上您認為需要的任何花里胡哨。 不要為了一個功能而搖擺不定。

問合適的人

一旦你確定有一個真正的問題可以通過實驗或改變平台來解決，而不是一些不值得努力的輕浮或幻想（操作和程序混亂的幽靈表現為工具問題），然後繼續構建您的考慮因素集。

為了構建考慮集，我們必須用正確的數據武裝自己，以做出涵蓋所有基礎的合理決策。 與所有事情一樣，正確的數據是您的問題，而不是意見。

你還想避免大多數人犯的一個常見錯誤——追求類別領導者。 類別領導者很少在所有方面都做得最好。 您也不應該默認使用上次評估的相同工具。

因為實驗很複雜。 您需要一個支持您的特定項目目標和實驗工作流程的平台。 在完美融入您的文化的同時，因為實驗成熟度的所有支柱必須協同工作。

對選擇持開放態度。 就像 Peep Laja 所說，他們立即改善了情況。

那麼，我們從哪裡開始呢？

B2B 買家對購買工具的看法——這是他們開始的地方

我們在 LinkedIn 上進行了一項民意調查。 我們詢問了 B2B 軟件購買者：“購買每年花費超過 5,000 美元的軟件時，您做的第一件事是什麼？”

他們回答：

• 57% 進行谷歌搜索
• 21% 研究知名品牌
• 14% 從 G2 或 TrustRadius 開始，以及
• 7% 要求推薦

其他意見包括那些將所有四個結合起來的人。 雖然不是一個重要的樣本，但它具有相當的代表性，讓我們了解了買家開始搜索工具的首選方法。

那麼，擁有最強 SEO 的工具會勝出嗎？ 不完全是。 我們用大量的鹽來獲取這些數據。 它表明，當我們對某事一無所知時，我們會傾向於首先求助於谷歌。

雖然這是您搜索的跳板（為您提供要考慮的 A/B 測試工具列表），但您需要一個更明智的策略。 來自本次民意調查底部的一個：問合適的人。

我們推薦什麼

諮詢廣泛使用 A/B 測試工具的人員、您的團隊，並了解您的利基市場中的競爭對手或其他參與者使用什麼。

詢問您網絡中定期測試的人員

從...開始

• LinkedIn：查看轉化率優化專家組。 有些更針對 SaaS、營銷專業人士和 Shopify。 或者使用正確的主題標籤（例如：#CRO、#abtesting #experimentation 和 #optimization）發布帖子，標記您認識的頻繁 A/B 測試人員，並公開徵求建議。
• Slack 社區：為 CRO Growth Hacks、Marketers Chat、Growmance 和 Measure 等營銷人員請求有關 Slack 社區的建議。

你會想要避免

• 機構聯繫人：至少在這個階段，因為大多數人都與工具或他們最喜歡的工具有聯繫，這可能涉及也可能不涉及經濟回扣和補償。 這既不好也不壞。 這就是現在的空間。
• 谷歌結果：避免谷歌搜索特定A/B測試平台或做出決定的結果。 您想要一個適合您的工具，而不是具有最佳 SEO 的工具。

你也可以…

使用 BuiltWith 查看您空間中的其他品牌

如果您處於利基行業，這很有效。 經常推薦的平台可能沒有與您的技術堆棧集成。 或者他們可能不支持通過實驗來改進對您而言重要的方面和指標。

例如，Shopify 領域有很多轉化率優化，但大多數品牌都認為努力跟踪收入是設置 A/B 測試工具的一部分。

你想為任何對你的實驗計劃很重要的事情而苦苦掙扎嗎？

這就是為什麼您正在考慮的 A/B 測試工具應該有特定的規定來滿足您的測試需求。 就像 Convert 如何提供自定義 Shopify 應用程序來擺脫收入跟踪問題一樣。

這可能不會產生您需要的確切工具，但它會告知您的考慮因素。

要查找您所在空間中正在使用的品牌，您只需要他們的網站地址即可在 BuiltWith 上運行搜索。

或者，您可以搜索您正在考慮的工具，看看誰在您的空間中使用它們。 使用免費帳戶時有限制。

點擊你的團隊

如果您有一個團隊定期在您的組織中運行測試，那麼他們是最能告知您的考慮因素的團隊之一。 他們已經在游泳池裡游泳了，所以他們會知道溫度。

聽取他們的意見。 詢問他們為什麼希望使用特定工具。 哪些功能是不可商量的，哪些是值得擁有的？

什麼過去的經驗勝過花哨的功能發布？ 最好的信任投票來自過去在特定平台上取得成功的測試人員。

收集這些信息並構建它。 如果您找到建議，請快速檢查您的問題，以確保該建議有價值。

建立你的考慮集

在這個階段，您已經識別出 3 或 5 個您非常感興趣的工具。這是一個堅實的起點。 但現在，您的決定可能基於無形因素、推薦和品牌認知度。

當您構建您的考慮因素集時，您將創建一個包含這 3-5 個 A/B 測試工具的矩陣，並將它們與問題的組成部分相對應。 也就是說，他們在解決您希望使用適合您的 A/B 測試工具解決的主要問題方面的表現如何。

讓我們舉例說明：

問題：實驗部署延遲。

如果您已經查明了不止一個基本問題，那麼您還需要為這些問題設置另一個考慮因素。 但是使用相同的工具，問題的只是不同的組成部分。

關於多個問題的問題不僅在於評估起來很複雜，而且還有一個令人驚訝的替代方案可以脫穎而出。 這就是你如何知道你正在做出客觀的決定。 很整潔，對吧？

注意：由於所有問題都有不同的優先級，請確保您已相應地對它們進行加權。

那麼，您怎麼知道要在上面的示例中填寫什麼考慮因素？

填補空白

• 評論
  
  從 G2、Capterra 和 TrustRadius 等流行的軟件評論網站開始。 請記住：贊助的個人資料可能會顯示得更多。 然而，這與工具在解決問題方面的能力無關。

• 缺點
  
  瞄準那些 2-4 星的評論。 那裡的缺點通常是經過深思熟慮的。 通過它們挖掘可能對您的目標造成破壞性的問題。 看到你想避免的事情了嗎？ 在考慮集上放一個“X”。

不過，用少許鹽來進行批評性評論。 對別人不利的東西不一定對你也不利。 但是，如果您在 3-4 條評論中註意到一個共同點，那麼就有一個值得關注的模式。

• 比較表
  
  有些工作已經為您完成了。 查看比較表 - 來自供應商和來自 HubSpot 和 CXL 等公正的第 3 方來源。

我們有一個工具可以幫助您比較和對比 Convert Experiences、Google Optimize、Optimizely、VWO、AB Tasty、Qubit 等。

想了解 CRO 專家對他們如何購買 A/B 測試工具的看法嗎？

以下是 Ruben De Boer 對於選擇 A/B 測試工具的看法：

首先，當然，你必須確保你有足夠的流量進行 A/B 測試，至少有一部分公司支持測試，並且開發有足夠的資源來實施成功的實驗。

接下來，考慮您當前和未來的需求。 首先評估當前情況，例如您的目標、需求和參與人員。 例如，如果 IT 完全參與其中，您可以選擇服務器端解決方案。 而如果只涉及營銷人員，客戶端最有可能是要走的路。

然後，不要只看目前的情況，而要考慮幾年後你想達到的目標。 那你有什麼需求？ 你會擴大實驗的數量嗎？ 有更多的團隊成員使用該工具嗎？ 進行不同類型的實驗？ 與不同供應商的銷售代表討論提升的可能性。

最後，使用最符合您當前和未來需求的兩三個工具進行免費試用。 在免費試用期間，檢查該工具的用戶友好性、（定位）選項以及適用於您的業務的其他內容（即，它是否適用於您的單頁應用程序）。

此外，個人聯繫也很重要，因為您可能需要他們的客戶支持。 例如，是否有入職幫助？ 如果是這樣，你對它有多滿意？ 另外，請聯繫他們的客戶支持。 除了查看可用的渠道（聊天、郵件、電話）之外，還可以查看它們的響應速度（它們是否在同一時區？）以及它們的幫助程度。 最後，與 IT 一起檢查該工具對您的站點性能的影響。

在線對話首席轉換經理 Ruben De Boer

這是 Max Whiteside 的看法。 Max 是 Breaking Muscle 的內容主管：

定義測試範圍，因為這樣做將使您能夠限制 A/B 測試工具的測試能力。 您是打算只進行 A/B 測試，還是需要一個可以同時處理多頁和多變量測試的工具？

每個工具都以獨特的方式運行，並提供不同的測試類型。 因此，請尋找具有您需要的所有功能的工具，這樣您就不必隨著測試能力的增長而切換工具。

其次，預算 A/B 測試是一個迭代過程，這使得預算成為實施測試環境時的關鍵考慮因素。 在達到預期結果之前，您可能需要多次重複測試，此時您可以進行下一次迭代。 它需要時間和資源，您的預算將決定其上限。 找一個不會對你的錢包造成重大影響的工具。

在運行測試時，某些測試工具可能會對您的網站速度產生負面影響。 加載緩慢的頁面會增加跳出率並激怒用戶，從而導致轉化次數減少。 在這種情況下，控制和變體都不會以最佳方式執行，即使滿足最小樣本量，也會導致 A/B 測試結果不可靠。

此外，閃爍效果極小。 當用戶在被重定向到變體之前短暫查看原始網頁時，會出現閃爍效果。 閃爍會阻礙用戶體驗並扭曲測試結果。 為了保持 A/B 測試的可靠性，最好選擇不會產生閃爍效果的工具。 因此，確定 A/B 測試工具是否會減慢您的網站速度至關重要。

Max Whiteside，Breaking Muscle 的內容主管

與工具聯繫

到目前為止，您一直是您正在考慮使用的工具的秘密崇拜者。 現在是時候克服你的害羞並建立聯繫了。

最好的起點是免費試用或演示。

開始免費試用並預訂演示

您需要查看該工具的運行情況。

它在您的各種 A/B 測試應用程序中表現如何？ 例如，作為 Shopify（或任何其他電子商務）商店的 CRO，您會想知道它從測試彈出式報價的 CTA 副本到產品圖片展示位置的表現如何。

演示向您展示了該工具如何解決您的問題，而免費試用則顯示平台是否支持商品聲明（即功能、定價、服務、路線圖）。

注意：大多數企業級 A/B 測試工具在對您進行資格預審之前不會與您一起進行演示。 他們不提供免費試用。 這可能是您評估過程中的一個盲點。

衡量文化

您可能會問，“為什麼文化在我購買的工具中也很重要？”

當您使用 A/B 測試工具時，供應商將成為您的實驗文化的一部分。 如果您在商業實踐和價值觀方面相似，那麼這種關係最有效。

不用擔心，這不會將您的搜索範圍縮小到您只需要考慮 1 或 2 個工具的地方。 好的文化其實並不罕見。 您只是想避免可能會變得太不舒服並過早提示更換工具的摩擦。

那麼，您如何衡量 A/B 測試工具的文化？ 您可以查看 Glassdoor 評論。 在那里工作或曾經工作過的人可以對文化提供相當透明的（儘管是匿名的）洞察力。

評估 A/B 測試工具供應商的另一種方法是他們與行業的互動。 他們真的教育空間嗎？

您可以在他們的博客和社交媒體頁面上找到什麼類型的內容？ 業內其他參與者如何與他們互動？

通過 GIPHY

他們是否正在超越他們的工具來幫助您改進流程？ 這不僅僅是發布“我們的工具很棒”的內容。 您可以清楚地發現一個為其受眾成功投資的品牌。 很難隱藏如此明亮的光芒。

請求您丟失的信息

是的，您可以要求 A/B 測試工具供應商使用 Request for Information 文檔為您填補空白。

RFI 文檔是相似的，所以這樣的模板可以工作。 除了關於您的組織的介紹性信息和您想要實現的目標之外，您的獨特之處在於您提出的問題。 你會想知道

• 供應商的跟踪記錄
• 與您的組織類似的客戶的成功故事
• 價錢
• 參考資料等

但同樣重要的是，獲取負責回复 RFI 的人員的姓名和聯繫信息。

預購裝備

購買成功的 A/B 測試工具的部分工作是在購買前進行準備——從沒有工具或當前工具過渡到技術堆棧中的新軟件。 您需要做什麼才能順利遷移？

首先，向您的團隊展示您的選擇並獲得支持。 如果到目前為止您還沒有單獨工作，並且您將作為一個團隊使用新工具，那麼他們需要與您在同一頁面上。 讓他們知道您選擇的供應商。 並告訴他們為什麼。

這就是為什麼採用結構化方法確實有幫助的原因。 現在，您可以展示您在做出此決定時所經過的細緻考慮，以便選擇此工具非常有意義。 到目前為止，一切都做得很好，此時買入很容易。

作為一個團隊討論你的決定。 它如何與您實驗過程中的當前問題聯繫起來？ 它如何支持您的增長目標？ 其他用戶對該工具有什麼看法？ 你從研究中學到了什麼？ 它在你的考慮範圍內是如何保持的？

此外，關注選擇供應商背後的“原因”。 除了該工具的絕對功能之外，您是否會與支持您的測試目標的供應商合作？ 它們是否為您的團隊提供充分利用新 A/B 測試工具所需的教育支持？ 供應商對其用戶的目標是什麼？

然後，起草過渡時間表並準備推出。 遷移需要仔細規劃，以防止出現問題和代價高昂的延誤。

這就是為什麼您需要與支持您的供應商合作的原因。 供應商會協助遷移嗎？ 你能把你的數據轉移給新的供應商嗎？ 是否有健全的入職流程？ 找出完成這項工作所需的專業知識以及每個階段需要多長時間。

最後，將優化計劃的目標歸零，按 3-6-9 個月細分。 這樣，您就有了季度檢查點來評估您做出的決定。 選擇的 A/B 測試工具和供應商是否符合您一開始的期望？

這裡要小心：期望必須是現實的。 確保您不會根據供應商無法影響的結果來衡量供應商。

讓我們把它作為一個可操作的清單，您可以隨身攜帶。

遷移時要牢記的便利因素清單

你想從好的遷移到更好的； 聰明到天才； 令人驚奇到幸福。 這不是偶然發生的。

勾選下面的所有復選框，這樣您就可以確定要遷移到的 A/B 測試工具的性能超出您的預期，並幫助您實現實驗目標。

• 成本——A/B 測試工具的成本是否能證明您期望的結果是合理的？ 該工具的累積投資如何達到您的預期投資回報率？

• 學習曲線——您不想花費寶貴的實驗時間來試圖弄清楚如何使用您選擇的測試工具來完成基本任務，因為 UI 中充斥著大量您永遠不會使用的功能。 閱讀評論以了解該工具的學習曲線。

• 閃爍——當用戶在 A/B 測試軟件向他們展示變體之前看到頁面的原始版本在他們的屏幕上閃爍時，就會發生閃爍。 這可能會損壞您的測試結果。
  
  Convert Experiences 等一些工具開發了防閃爍技術，因此不會發生這種情況。 但是許多免費和開源的 A/B 測試工具還沒有這種能力。

• 開箱即用的集成——您的 A/B 測試工具不是獨行俠。 它必須與您的技術堆棧中的其他工具合作才能為您帶來最大價值。 查看您的 CRO 工具附帶的開箱即用集成的數量。 它是否與您需要使用的重要服務集成？

• 谷歌分析——確保您的工具與穀歌分析順利集成。 設置時，這是您必須完成的首要任務之一。 了解您是否可能需要開發人員來幫助使用該工具。

• 目標——目標設定是 A/B 測試的一個組成部分。 它為您的測試添加上下文並說明測試結果的影響。 您的新工具如何處理這個問題？ 您可以從 Google Analytics（分析）導入目標嗎？

• 收入跟踪- 遷移時，您希望確保為一次性和多收入事件正確配置收入跟踪。 有些工具需要手動設置。 你不想要那個。
  
  Convert Experiences 自動連接到 Google Analytics Universal 和 Classic，以提取交易、收入和訂購商品的價值，以通知測試。

• A/A 測試——新工具是否通過了 A/A 測試？ 如果您可以免費試用 A/B 測試平台，請運行此測試。 這就是你如何知道你的工具已經準備好處理沒有偏見的 A/B 測試——或者沒有。

• 協作者設置——如果您在團隊中工作，這一點尤其重要。 您能否控制對協作者可以查看和更改的內容的訪問？

還有這兩個要記住的額外注意事項：

1. A/B 測試工具提供什麼級別的客戶支持？

您評估的另一個考慮點是您作為客戶可獲得的技術支持水平。

購買 A/B 測試工具可能是一項巨大的承諾。 您需要確保該工具在遇到困難時為您的團隊提供足夠的技術支持。

市場上頂級 A/B 測試工具提供的支持水平各不相同。 通過一些研究，您可以了解您正在考慮的測試工具是否提供以下全部或組合：

• 實時支持：通過電話或視頻通話提供
• 電子郵件支持：由專用電子郵件地址提供。
• 實時聊天：使用內置消息應用程序
• 文檔：提供常見問題解決方案的在線文章存儲庫。
• 自動支持：一組預先錄製的響應。

一旦您確認了可用的支持級別，您需要查明駐紮在各種支持渠道中的人員是否是 CRO 專家。 為支持人員選擇具有 CRO 專家的工具尤為重要，因為如果您遇到技術問題，他們可以更好地提供您需要的實時幫助。

還值得注意的是，一些 A/B 測試工具提供專門的客戶支持作為附加組件，您需要付費或升級到更高的計劃才能免費訪問。 支付專門的技術支持或升級到遠遠超過測試需求的計劃以獲得更好的支持將增加 A/B 測試工具的總體成本。

在 Convert，我們的開發人員和 CRO 專家團隊免費為我們的客戶提供技術支持。 我們的支持採用實時聊天、在線文檔、電子郵件支持和實時支持的形式。

2. A/B 測試工具會影響您的網站速度嗎？

購買 A/B 測試工具時的另一個重要考慮因素是它們對網站速度的影響。 一些 A/B 測試工具可以增加您的網站速度並增加加載時間。 緩慢的網站加載時間會影響用戶體驗，並可能影響您的流量。

讓我們深入了解市場上一些頂級 A/B 測試工具如何影響您的網站速度的機制。 A/B 測試工具通常分為兩類：

1. 客戶端 A/B 測試工具
2. 服務器端 A/B 測試工具

客戶端 A/B 測試工具使用存儲在訪問者瀏覽器上的 JavaScript 片段來根據您的定位說明更改服務器向訪問者顯示的內容。 服務器端 A/B 測試工具通過更改從服務器向用戶提供準確的內容，而無需觸摸用戶的瀏覽器。

服務器端測試工具似乎是最好的選擇，但它們可能很昂貴並且與許多用例無關。 您可以在我們的客戶端與服務器端測試文章中深入研究差異。

許多頂級 A/B 測試工具都是客戶端測試工具。 客戶端 A/B 測試工具以兩種方式加載：

1.同步

這是您的 A/B 測試軟件的 JavaScript 片段在您的網頁加載之前完全加載的時候。 This way of loading the scripts prevents flickering. But may cause your page speed to slow down, as the code snippet from your A/B testing solution load time adds to your overall page speed.

2. Asynchronously

This is when the code snippet from your A/B testing platform of choice and web page loads simultaneously. Tools that use this method of loading may be fast but are prone to flickering.

As I mentioned earlier, flickering occurs when the visitor sees the original content before the variation loads.

Convert is one of the fastest A/B testing software on the market. This is thanks to its Smart Insert Technology ^TM which reduces its impact on your site speed.

5 A/B Testing Tools We Like

Where do you start in your search for the perfect A/B testing tool to buy? Right here with our top 5 favorites.

We've considered everything we talked about above and created a list based on what we know about our audience.

讓我們潛入吧！

1. Convert Experiences

Convert Experiences is for companies and teams looking to scale up their testing program with a mid-level testing platform that comes at a great price. You get fantastic support through your experimentation growth while staying ahead of privacy and data protection requirements.

Convert seamlessly integrates with over 100 tools in your MarTech stack and frees you from testing limitations you might've experienced with free tools and even some paid testing tools.

What we like about the tool: Everything! We built it

TrustRadius Rating: 9.4 out of 10 (18 reviews)

Pricing: Starts at $699/mo, then $199 for every 100k visitors after that

Free plan or trial? Yes, for 14 days with no credit card info needed to start

Cost per 100k visitors: $199

優點：

• Stable, flicker-free testing
• 3rd-party cookie-free testing with no limits
• Over 100 integrations with other marketing tools (Shopify, WordPress, HubSpot)

缺點：

• Only basic post segmentation is enabled on the kickstart plan

Client-side or server-side tool? 兩個都。 You can use a client-side visual editor as well as set up to run custom JS on the server side.

Integration with Google Analytics? 是的。

Core Web Vitals ready? 是的。 You get fast page loading, flicker-free, and minimal effect on CLS. So, your SEO isn't affected.

Frequentist or Bayesian stats? Frequentist two-tailed z tests.

Enterprise Support? 是的。 We serve companies like Sony, Unicef, and Jabra.

Customer Support? Yes, including live chat and a support center. And there's more coming.

Consciousness Quotient (CQ): We're an outspoken campaigner for user privacy and have environmental consciousness deeply embedded in our DNA. We are fully GDPR compliant and don't use tools that aren't GDPR compliant. And we're proudly 15x carbon negative.

Fair TrustRadius review:

2. 喀麥隆

Kameleoon 是當今世界上最受歡迎的 A/B 測試平台之一，也是醫療保健和金融科技公司的最愛。 它以比大多數工具更好的功能為桌面帶來了額外的好處。 它還帶有出色的用戶界面和出色的個性化設置和集成。

為什麼我們喜歡這個工具：人工智能驅動的訪客細分和全棧個性化選項

TrustRadius 評分： 8.9 分（滿分 10 分）（70 條評論）

定價：定制，我們聽說每年大約 35,000 美元，具體取決於您的流量

免費計劃或試用？ 是的

每 10 萬訪問者的成本：不適用

優點：

• 先進的防閃爍技術
• 易於使用的所見即所得編輯器
• 與其他營銷應用程序順利集成

缺點：

• 所見即所得編輯器需要一段時間才能加載
• 無法存檔測試

客戶端還是服務器端工具？ 兩個都

與穀歌分析集成？ 是的

Core Web Vitals 準備好了嗎？ 是的。

頻率統計還是貝葉斯統計？ 沒有關於這方面的現成信息。

企業支持？ 是的。 他們的企業客戶包括豐田、樂天和雷克薩斯。

客戶支持？ 是的。 你也可以找一個客戶經理。

Consciousness Quotient (CQ)：它們符合 HIPAA、GDPR 和 CCPA 標準，並且還為您運行的每個 A/B 測試提供靈活的同意管理功能。

公平 TrustRadius 評論：

3. AB 美味

在列出要考慮的最佳 A/B 測試工具時，您肯定希望 AB Tasty 出現在該列表中。 這是一個中級工具，非常適合希望超越基本網絡實驗並運行可觀的測試程序的公司。

儘管它非常堅固，但它具有相對簡單的 UI，包含機器學習功能等功能，因此您的網站可以在大流量上運行更複雜的個性化和數據跟踪。

為什麼我們喜歡這個工具：簡潔的 UI，非常適合集中測試

TrustRadius 評分： 8.7 分，滿分 10 分（78 條評論）

定價： 40 萬訪客的起價為 1,900 美元/月

免費計劃或試用？ 不，但您可以申請演示。

每 10 萬訪問者的成本： ~475 美元

優點：

• 動態小部件
• 非企業團隊的中檔定價
• 廣泛的分析報告

缺點：

• 統計顯著性計算器是基本的

客戶端還是服務器端工具？ 兩個都

與穀歌分析集成？ 是的。

Core Web Vitals 準備好了嗎？ 是的，它是一個快速的工具。

頻率統計還是貝葉斯統計？ 貝葉斯。

企業支持？ 是的，它們提供企業客戶體驗。 迪士尼、歐萊雅和 Klaviyo 等公司使用 AB Tasty。

客戶支持？ 是的，有實時聊天和知識庫。

Consciousness Quotient (CQ)： AB Tasty 是一個注重隱私的品牌，它還通過直接向非政府組織捐贈、回收和讚助蜂箱來產生積極的社會影響。

公平 TrustRadius 評論：

4.優化

Optimizely 是領先的網絡實驗平台之一，並因其可靠的工具而享有盛譽。 然而，它的定價對於普通的 CRO 團隊來說可能非常令人望而卻步，因為他們非常關注企業。

除此之外，他們在使 CRO 團隊運行高級實驗程序和個性化 Web 體驗方面做得很好。

為什麼我們喜歡這個工具：強大的實驗工具與人工智能驅動的個性化相結合

TrustRadius 評分： 8.7 分，滿分 10 分（3 條評論）

定價：隱藏，據報導每年約 36,000 美元。

免費計劃或試用？ 不，自 2018 年以來沒有

每 10 萬訪問者的成本：不適用於此工具

優點：

• 提供廣泛的定位選項
• 易於使用的小部件功能
• 整潔的用戶界面

缺點：

• 對於非開發人員而言，與 Google Analytics 集成可能會很複雜
• 非常昂貴

客戶端還是服務器端工具？ 兩個都。 客戶端實驗使用 JS 片段，服務器端使用開發人員 SDK 完成。

與穀歌分析集成？ 是的。

Core Web Vitals 準備好了嗎？ 是的。

頻率統計還是貝葉斯統計？ Optimizely 使用順序實驗，而不是您在其他平台上看到的固定範圍實驗。

企業支持？ 由於定價，大量迎合企業客戶。 客戶包括惠普、IBM 和微軟。

客戶支持？ 是的，包括 24/7 電話號碼和幫助資源。

意識商 (CQ)：他們注重隱私，並且有讓新員工在第二天就參與社區志願服務的傳統。

公平 TrustRadius 評論：

5.谷歌優化（和優化360）

Google Optimize (GO) 是一個免費的網站優化和實驗工具。 它曾經是 Google Analytics 中的內容實驗，但現在它是運行 A/B、重定向、個性化、多變量和橫幅測試的獨立服務。

Google Optimize 的高級版本是 Optimize 360​​。它是 GO 的更強大、無限制的版本。 GO 非常適合開始 A/B 測試。 使用 GO 獲得的經驗很容易滑入中檔工具。

為什麼我們喜歡這個工具：最好的免費 A/B 測試工具，非常適合開啟您的 CRO 之旅

TrustRadius 評分： 7.9 分（滿分 10 分）（43 條評論）

定價： Google Optimize 是免費的，但其高級版 Optimize 360​​ 有自定義定價——據傳每年約為 150,000 美元。

免費計劃或試用？ 是的，對於優化。

每 10 萬訪問者的成本：不適用於 GO

優點：

• 最容易上手的工具——適合初學者的 UI
• 與 Google Analytics 的最順暢集成
• 詳細的受眾細分，得益於谷歌龐大的數據資源

缺點：

• 一次限制為 5 次測試
• 有時會閃爍
• 無法測試移動應用

客戶端還是服務器端工具？ 兩個都

與穀歌分析集成？ 當然，是的。

Core Web Vitals 準備好了嗎？ 您可能會遇到閃爍和 CLS 影響，但這是可控的。

頻率統計還是貝葉斯統計？ 貝葉斯檢驗方法。

企業支持？ 這僅適用於優化工具 360

客戶支持？ 免費工具有一個社區和其他幫助資源。 優化 360 客戶獲得全方位的客戶支持。

Consciousness Quotient (CQ)： Optimize 是 Google 的眾多產品之一，屬於 Google 的碳中和和價值數十億美元的慈善事業。

公平 TrustRadius 評論：

關鍵要點

為您的需求找到合適的 A/B 測試軟件並不像看起來那麼容易。 需要考慮複雜因素，例如您的測試需求、定價、集成、可用技能、設置、培訓等。

當您從問題開始時，詢問合適的人，建立您的考慮清單，並在仔細分析可能影響您使用 A/B 測試工具的體驗的關鍵因素的基礎上構建考慮組，您已經到了一半。

您可以選擇使用我們上面列出的 5 種工具開始測試。 但是，如果這不是您的理想之選，那麼我們已經為您提供了所需的一切，研究 50 多種 A/B 測試工具，並找到適合您獨特需求的工具。

因為最終的決定權在你。