理解Web测试工具的术语、概念和报告

理解Web测试工具的术语、概念和报告

1.控制(或者默认)内容与挑战者版本

你在网站上测试的所有内容都需要有一个目前在网站上显示的对应版本。内容的原始版本称作控制内容或者默认内容,这一内容与“挑战者”内容变种进行比较测试,了解哪个版本能够更好地完成转化。例如,如果你测试网站上的一个注册按钮,目前在网站上的版本是控制版本,你将要进行测试的新版本是挑战者版本。
 
在比较测试之前不要调整你的控制版本

在进行任何比较测试之前,都要确保没有对原始版本进行修改。在实际与其他挑战者版本进行比较测试之前,有些测试者就错误地对控制版本进行小的调整和改进。这种做法可能有问题,因为你可能在无意之间做出不好的调整,人为地歪曲挑战者版本带来的提高,也可能做出的是好的调整,从而限制了挑战者可能带来的转化率提升,得到不公正的测试结果


2.(Section)、Offer, mBox和类似的测试元素


标题所示的术语是网站中被测试的实际元素和部分的名称。在你的网站测试工具中,你可以为页面上想要测试的每个元素(例如,产品图片、提交按钮或者标题)创建名称。在设置页面上测试元素的名称时,使用好的命名约定很重要。这会使测试的分析变得更加容易,特别是同时测试许多元素(例如,复杂的多变量测试)的情况下。好的名称还有助于你在同顾历史测试时理解过去测试的内容。


好的测试元素命名约定应该是“PageName_ ElementName",在同时测试多个网站的时候应该是“SiteName_ PageName一lementName"。在两个单同之I司使用下划线有助于使名称更容易理解。

3.配方(Recipe)或经验(Experience)

这两个测试术语用于多变量测试,本意相同。每个配方或者经验包含你测试的每个元素的不同变种,多变量测试将包含多个配方/经验(根据你正在测试的元素和变种数量)。当你用田口方法建立多变量测试时,工具自动创建有代表性的配方(或者经验)并告诉你在每个配方中需要放置哪个元素变种。

根据每页测试的元素数量,以及每个测试元素的变种数量,工具可能自动创建不同数量的配方(或者经验)用于测试。在第3章中,你将学习到更多创建配方的最佳实践,以更快地得到结果。


4.测试结果报告术语


为了帮助你理解网站测试结果,这个小节定义了一些最常见的术语以及解读的方法。

(1)转化提升或者观测到的改进

这是你在分析测试表现时需要理解的关键概念。“转化提升”( conversion lift)这一术语通常在大部分测试结果报告中可以看到,是测试版本(或者配方)在对比测试的原始版本基础上获得提升的指标。在Google网站优化器中,它称作“观测到的改进”( observed improvement )转化提升通常以百分比的形式显示,表现对于原始(或者默认)内容提升的程度。

在高级测试工具中,你可以配置转化提升基于哪些成功衡量指标。例如,你可以将它从“订购的产品数”改为“平均订单价值”,根据你用于定义转化提升的成功指标,往往会得到不同的结果。


(2)置信度

测试结果报告中需要理解的另一个关键术语是置信度(confidence )。当每个测试版本(配方)在你的网站上收集访问和转化时,工具就开始确定是否已经收集了足够的统计显著性数据;换句话说,了解结果的有效性是否有足够的置信度这一指标很重要,所以有些测试版本可能获得很高的转化提升,但是还没有足够的支持数据能够确定统计显著性,所以测试结果精确性的置信度水平很低置信度水平在不同的测试工具中用不同的可视化方式显不通常,它在报告上显不为一个彩色图形(例如,柱状图),绿色代表可信,红色(或者没有颜色)代表不可信理想状况下,你应该选择具有高置信度(至少为80%)的胜者;否则,你可能最终推出的是从长期来看会降低转化率的版本图2.10展T了Adobe Test&Target测试工具中置信
度的显示方法。


5.元素贡献或者相关性评级报告

这是多变量测试中你应该关注的常见报告,用于理解测试中哪一个元素对转化率有最大的影响。元素贡献或者相关性评级报告有助于单独分解所有测试元素,从而让你看到哪个测试元素对转化率有最大的影响。它还说明了每个元素影响的置信度。Test&Target中的元素贡献报告,它高亮显示了每个被测元素的“预计最佳体验”。
 
这个报告的主要用处是理解多变量测试中哪一个页面元素是为进一步改进所做的测试基于迭代的测试)中的最佳候选你将在第3章学到更多相关内容和最佳实践。

  • 上一篇: Web测试工具测试方法介绍
  • 下一篇: 做内链的要点是什么?做内链的要点有哪些?
  • 2014年百科SEO教程seo百科栏目,汇集seo十万个为什么,提供seo入门教程学习seo,研究seo最新动向。
    在后续的文章中将会分享更多关于seo十万个为什么、学习seo、谷歌SEO教程、百度SEO教程和搜索引擎优化教程。

    - Copyright  ©2012~2013 - 百科SEO教程(www.bktj.net)版权所有 - 站长QQ1414929496 - 网站地图 - Power By-Z-Blog -
    --