在过去的几年里,转换优化已经成为一个流行词,不是吗?
我的同事,Groove的Len Markidan今年早些时候说过这引起了我的共鸣:
这很悲哀,但却是事实;“增加转化率”已经成为网络上数百种产品的老生常谈的口号。
不幸的是,这不仅仅是产品。许多博客兜售“转化优化技巧”,让你相信他们是这方面的权威。
这本身并不是什么新鲜事。搜索引擎优化机构10年前就这么做了,5年前更多的人用社交媒体营销来做这件事。ob欧宝娱乐app下载地址
然而,转换优化技巧的问题在于,词典本身听起来更权威。
统计意义、队列、样本大小……这些都是科学家和统计学家使用的术语真的让人印象深刻。
“他们对‘频繁买家’群体进行了A/B测试,发现当访问者看到橙色的大按钮时,转化率提高了100%,统计意义达到99.95%。”
很难反驳,对吧?但在你冲进设计部门大喊“把所有按钮都换成橙色!”“想想你刚刚读到的东西。
你没有看到的是,测试包括100名访问者,在2天内运行,来自5个不同的流量来源,以及来自20个不同地区的客户。同时,点击按钮的次数从3次变为6次。
我的导师Peep Laja写了一篇必读的文章,题为我看到企业经常犯的12个A/B测试错误,这将帮助你避免根据自己的垃圾数据做出错误的决定。运行A/B测试可以为你提供洞察力不是这篇文章是关于什么的。
相反,这是一个可信的媒体如何被欺骗,在糟糕的科学和被操纵的统计数据的前提下,传播听起来像田园诗,但虚假的、有害的信息的故事。
它与网站或优化无关,但反映了围绕转化率优化的幻想故事,这些故事每天都在营销圈中兜售。ob欧宝娱乐app下载地址
我希望这个故事能帮助你更怀疑地看待转化建议。
一个男人如何欺骗全世界,让他们认为吃巧克力能帮助减肥。
2015年3月,你可能已经读到约翰内斯·博汉农博士和一组研究人员是如何饮食与健康研究所发现吃黑巧克力和低碳水化合物饮食相结合可以帮助你减掉10%以上的体重。
这项研究将年龄在19岁至65岁之间的志愿者分为三组,目的是“找出食用巧克力与饮食干预相结合是没有效果,还是在适当的剂量下使这种饮食更有效”。” (Thehealthsite.com)
第一组遵循严格的低碳水化合物饮食,第二组遵循同样的低碳水化合物饮食,但增加了42克黑巧克力(81%),第三组作为对照,他们的饮食方式没有改变。
根据这项研究,与对照组相比,低碳水化合物组的体重减轻了,但令人惊讶的是,低碳水化合物组加巧克力的体重减轻了10%。这些都是统计上显著的结果,这意味着只有5%的可能性是随机波动造成的。
由作者自己的承认,这些数据虽然在技术上是准确的,但远非有缺陷,而且“不堪一击得可笑”。更糟糕的是,整个研究设计唯一的目的就是为了引起媒体的注意。
事实上,没有约翰内斯·博汉农博士或饮食与健康研究所——那只是一个虚构的名字和一个以木板路为主题的wordpress网站。
约翰·博汉农博士是一名医学记者,他为一部关于垃圾科学和饮食行业媒体综合体的纪录片做出了贡献,然而,这是非常真实的。他的博士学位也是真的,研究的是细菌分子生物学,也就是说,与饮食或健康毫无关系。
作为一名记者,约翰怀疑其他卫生记者是否会认真对待“新闻”:
“我们能发表点什么吗?”可能。但除此之外呢?我以为肯定会失败。
我们科学记者喜欢认为自己比一般的黑客更聪明。毕竟,我们必须充分了解神秘的科学研究,才能解释它。对于那些没有科学知识的记者来说,只要他们从外部获取消息来源——任何有科学学位的人,更不用说真正的营养科学家了——他们就会发现这项研究是可笑的不堪一击。
更不用说谷歌搜索也没有找到约翰内斯·博汉南或他所谓的研究所的踪迹。健康科学栏目的记者在一英里外就能闻到。
但我不想听起来悲观。“让我们看看我们能走多远,”我说。
这项研究被许多“付费收录”的科学期刊所接受。虽然他们最终选择的期刊声称是经过同行评审的,但这项研究在接受付款后的两周内就发表了,完全没有变化。
这项研究一发表在科学杂志上,他们就提交了一份新闻稿,赫芬顿邮报、每日邮报和《大都会》等几家媒体开始逐字逐句地传播这篇文章,而对最初的研究人员只问了一些敷衍了事的问题。OB欧宝娱乐APP
没有人问一些非常基本的问题,比如“有多少人参与了这项研究?”、“他们吃的是什么低碳水化合物饮食?”或“他们减了多少体重?”
“关键是要利用记者惊人的懒惰。如果你把信息安排得恰到好处,你就能塑造媒体上出现的故事,就像你自己在写那些故事一样。
事实上,这就是你正在做的事情,因为许多记者只是复制并粘贴了我们的文本。”
为什么这项研究是有缺陷的(以及为什么你需要对你读到的东西更加怀疑)
如果有人问起,他们会知道只有15人参加了临床试验。
他们会知道这15个人被测量了18项不同的指标;体重,胆固醇,钠,血蛋白水平,睡眠质量,健康状况等,而且这个试验是故意设计成假阳性的温床。
看到的,当你在一小群人中测量大量的东西时,你就增加了找到一些“统计上显著”结果的可能性,即使这个结果可能与你测试的内容没有什么关系。
“把测量结果想象成彩票。每个人都有一个小的机会,以一个“显著”的结果的形式获得回报,我们可以编造一个故事,卖给媒体。你买的票越多,中奖的可能性就越大。
我们不知道确切的结果会是什么——标题可能是巧克力改善睡眠或降低血压——但我们知道我们至少有机会得到一个“统计上显著”的结果。
约翰的团队所做的就是P-hacking——也就是实验的设计被操纵,使数据具有统计意义——他们有60%的机会得到一些统计上显著的结果。
即使他们没有故意操纵数据,这项研究仍然注定要失败。
首先,当你分析一小群人时,你会让自己很容易受到一些不可控因素的影响。
例如,25岁以后,新陈代谢明显减慢,这使得减肥变得困难,或者女性的月经周期可能导致她的体重波动高达5磅。
这就是为什么需要更大的人群,具有相似的年龄,性别分布和饮食,来解释这些随机因素,以平衡和/或相互抵消。
“你甚至不能相信我们的非巧克力低碳水化合物组与对照组相比体重减轻了。谁知道对照组的少数人在吃什么?我们甚至都没问他们。”
尽管如此,这个故事还是毫无疑问地在许多知名网站上传播开来。
这并不是说这些网站故意误导人们,而是我认为这是这些网站试图喂养内容怪物的一种症状,并有一些东西可以吸引页面浏览量,从而吸引广告收入。
为什么你应该关心
这就是我为什么要和你们分享这个故事的关键。
在营销ob欧宝娱乐app下载地址优化中,不乏“X的微小变化如何使Y增加Z%!”
许多这样的故事是由善意的营销人员写的,他们想与同行分享他们的成就,但也在不知不觉中设计了有缺陷的实验ob欧宝娱乐app下载地址,并报告了假阳性。当然,在其他情况下,这些信息是为了一个好的标题,积极的公关,或者让你买东西而故意错误报道的。
你应该关心,因为作为营销人员,我们迫切需要关于如何从预算ob欧宝娱乐app下载地址中获得更多的可靠信息。
随着“转化优化技巧”成为新的“社交媒体营销”,你有能力区分好建议和坏建议是很重要的,这样你就不会被误导,根据错误的科学做出重大ob欧宝娱乐app下载地址决定。
由于市场营销领域没有正式的同行评议程序,而出版商又特别渴望“提供有价值的内容”,因此,与官方科学界相比,发表错误ob欧宝娱乐app下载地址的、可能具有破坏性的信息的门槛要低得多。
幸运的是,也有专家定期发布和分享关于转化率优化的有价值的信息他们愿意澄清任何误解。
所有这一切并不是说你应该怀疑你所读的一切,只是试着用健康的怀疑态度对待转化优化技巧,并在可能的时候总是要求更多的背景。
或者就像俗话说的那样,“如果一件事听起来好得令人难以置信,那它可能就是真的。”作者简介
汤米·沃克是Shopify Plus博客的总编辑。他的目标是为大型电子商务商店提供深入研究、诚实的建议,帮助它们扩大客户群、增加收入和利润。请听汤米的报道推特.