a/b 测试主要 html/css 重新设计

Question

在我的公司，我们正在重新设计我们的电子商务网站。 HTML 和 CSS 从头开始​​重写，使网站响应迅速/移动友好。

由于它涉及到我们最大的网站之一，负责产生我们 80% 以上的收入，因此非常重要的一点是什么都不做 "wrong"。

我们的应用程序 运行 在 LAMP 堆栈上。

测试重大重新设计的最佳实践是什么？

我正在思考的一些问题：

• 当 a/b 测试整个设计时（如果可能的话）我猜你绝对 不想 Google 过来索引你的新设计（因为它 仍处于测试阶段）。如何处理？
• 您是否应该将一定比例的用户重定向到新的 url（或 也许子域）？还是从 基于会话的现有索引 urls?
• 如何从 Google 分析的角度比较统计数据？ 如何提示 Google 新设计？我应该例如 创建新的 UA 代码？

Answer 1

解决办法可能是只为通过主页进入网站的客户设置cookie。这样做，您排除了 adwords 流量和回头客，他们可能期待其他网页设计，为他们提供原始网站并保持他们的体验不变。

仅使用家庭流量开始测试，设置 cookie 并将一定百分比重定向到子域。在同一分析帐户中，按 Google 分析中的维度衡量转化率。在您的 robots.txt 中设置 'disallow subdomain' 以排除该子域被 SE 抓取。

Answer 2

马克，您在这里混淆了几个不同的问题：

1. 检测。如果您的更改只能通过 HTML/CSS/JavaScript 表示，即本质上是优化的，您可以使用 VWO or Optimizely. If there are server side changes too, then a tool like Sitespect (any server stack) or Variant（仅 Java）之类的工具进行检测。使用商业产品的优势在于它们提供了许多开箱即用的重要功能，例如收集实验数据、体验稳定性（返回的用户看到相同的体验）等。您可以自己进行检测，但除非您查看的是少数几页，否则这通常很难，特别是如果您想这样做它在应用程序之外，通过 DevOps 机制。

2. 搜索引擎优化。如果你的仪器正确，这应该不是问题。 Public同一资源的控件和变体的 URI 不应不同。

3. 流量路由。考虑商业工具的另一个原因。他们将其从您的应用程序中排除，并让您设置百分比。一些工具，如 Variant，将允许您编写自定义目标器，例如“价值”用户总是看到控制权。