测试的力量
上QQ阅读APP看书,第一时间看更新

序言
揭开测试的神秘面纱

在过去的一年里,你觉得自己参加了多少次测试?我们说的是随机对照测试。此类测试往往将你和其他参与者(通常称为被试)随机分组,对不同组设计不同的测试方案,目的是分析不同测试方案的影响。比如你参与的心理测试或者试用某种药物,这些都是可以归类为我们所说的随机对照测试。

那么,你到底参加了多少次测试?乍一想,你可能认为答案是零。然而,除非你住的地方没有互联网,否则你很有可能已经在过去的一年里参加了很多次测试。如果你登录Facebook(1),浏览“新闻推送”(News Feed),观看广告,那么有可能你已经在不知情的情况下成为Facebook各种测试的被试。如果你在Google上搜索某件商品,在奈飞上观看某部电影,填写电子邮件中的调查问卷,或者打电话给某家公司寻求售后服务,那么你也可能已经成为他们的被试。

时至今日,随机对照测试已经褪去了作为学术研究工具的神秘面纱而成为主流。以前,测试方法可能与管理工具风马牛不相及。如今,Google等公司会首先在它们的平台上,通过测试来了解决策的重大改变对用户行为的影响,继而做出实质性改变和应对。从初创公司到跨国集团,再到政府部门,各类组织机构拥有了一种新的测试框架和测试方法,以了解自身产品和服务的效果。

我们正处于测试时代的早期阶段。测试可以帮助我们基于证据作出决策,从而弥补直觉和猜测带来的不足。我们已经看到,许多测试为组织机构带来了巨大回报。例如,一个简单的测试就让eBay发现它每年浪费的广告费达数百万美元。测试所带来的结论大部分都会产生积极的影响:政府利用测试结果来更好地设计和提供服务;企业利用测试结果来改善其人力资源的分配,提供更好的产品。如果测试设计得当、监督得力,也会对员工、顾客和民众有利。我们将着重讨论从测试中获得的成功经验和启示。

与此同时,我们也发现很多测试由于执行或解读不当,导致结论具有误导性或者使人们的时间和精力付之东流。即使在最理想的情况下,测试的设计和解读也不是一件易事,需要管理上的判断。例如,美国知名健身品牌24 Hour Fitness通过测试来寻找提高健身房使用率的方法。他们发现,许多干预措施在短期内可以提高健身房使用率,而在几个月后,这些措施的效果往往会大打折扣。

设计和解读测试颇具挑战性,需要一些特定的技能。在测试时代,有效的管理者越来越需要借助一些设计好的分析框架,以完成测试结果到管理决策的过渡。本书将帮助管理者开发和总结出一些原则,充分利用测试的结果。

测试也会引起客户和政策制定者的忧虑。其中的重要原因在于,测试及其结果主要存储在企业数据库中,不被公众所知悉,而且有可能会被用于未知的目的。测试给人以复杂的、有侵略性的、能操控他人的感觉。当人们意识到自己在完全不知情的情况下经常参与测试时,这样的感觉尤为强烈。因为某些企业的测试可能对企业有利,但对客户不利。我们将在本书中看到,全球最大的门票交易网站进行了一项测试,测试结果显示网站应该在客户订单生成前的最后一步才提示门票的附加费用,而不是一开始就公布全部价格。这项测试对该公司的价值显而易见,但对客户未必是有益的。

无论如何,测试始终是一种工具,既可为善,也可为恶,这取决于进行测试的主体是谁,他们的目的是什么,他们对测试“奏效”是如何定义的。我们为测试的潜在风险而担忧,但更为测试方法的无限前景感到振奋不已。因此,我们撰写本书是为了阐释测试的历史进程及其作用和影响,包括测试带来的洞见以及它们对公共话语的影响。我们的目标是帮助读者了解测试的价值,避开常见的陷阱。测试有时的确令人闻之色变,而本书将带领读者拨开迷雾,揭开测试方法的神秘面纱。

在第一部分,我们将对测试的潜能和导致测试行为激增的影响因素进行广泛讨论。在此过程中,我们将介绍测试革命的发展史,包括已知最早的测试、科学方法的进步、社会科学测试室和田野调查的兴起,以及近期公司和政府大量涌现的测试。在第二部分,我们将阐释测试在科技行业的核心作用,从爱彼迎、优步和eBay等公司的一系列著名测试中获取启示和最佳实践。除了科技领域,在第三部分,我们将研究组织机构的行为实验是如何帮助阐明健康、教育和财务决策的,以使流程和产品更好地解释人类行为中的许多奇特现象。

本书将为你详细介绍企业和政府所进行的那些测试的类型,以及基于测试结果做出的决策。我们还将讨论可以从测试中获得哪些洞见,以及测试在何时何地最有用。我们的目的是阐明测试在人们工作、生活中所扮演的角色。总之,希望本书能让你领略到测试的力量。