A/B 测试中的道德规范。 好的,坏的,未来

已发表: 2019-01-26
A:B 测试好的、坏的、未来的伦理

你有没有想过 A/B 测试中的伦理问题?

我们都有自己的道德指南针,指导我们什么是对什么错。 作为数字企业,我们应该把用户的最大利益放在心上,对吧?

嗯,这就是水变得有点混浊的地方。 A/B 测试是关于增长的,我们都知道这一点。 因此,很容易忽视我们的测试对最终用户的影响。 我们可能只是想增加收入并赚取利润。

当然,我们不会做任何不道德的事情。

我们甚至可能会尝试远离我们认为不受欢迎的事情,例如不真实的倒数计时器,或与后端无关的库存盘点。

但是,如果我们的产品真的可以改变人们的生活呢? 如果我们的产品能让人们更快乐、更健康或更富有会怎样? 我们可以争辩说,如果我们的产品确实做到了其中一项,我们应该尽我们所能——使用任何营销或销售策略——将我们的产品交到最终用户手中。

就像我说的,我们在浑水摸鱼。业务 KPI 和用户兴趣并不总是一致的。 事实上,我会大胆猜测,他们绝对不适合大多数公司。

因此,让我们更深入地了解我们如何才能驾驭这些道德水域,让我们的客户满意并增加我们的收入。

道德如何适应 A/B 测试?

我最近与行为心理学家和 A/B 测试专家 Bart Schutz 进行了交谈。 在我们的电话会议上,他给出了 A/B 测试的完美示例,表面上看起来像是赢家,但对最终用户具有巨大的道德影响。

想象一下,去一个预订网站,看到强调的旅馆的清洁度。 你可能会认为这是个好主意。 可以想象,清洁度得分最高的旅馆获得的点击次数最多。 他们做到了。 销售额增加了,每个人都很高兴,而且看不到任何道德问题。

直到他们的首席心理学家发现了一篇研究清洁和安全感之间关系的文章,尤其是女性。 通过强调旅馆的清洁度,它们可以引起隐含的安全感,可能会促使更多女性前往实际上不安全的旅馆。

从表面上看,这个 A/B 测试看起来对企业和客户都有好处。 该业务因预订量的增加而受益,而客户似乎因看到房间的清洁而受益。

然而,在做了经验和分析数据之后,结果却造成了一个很大的道德困境。 企业的最大利益不一定是客户,尤其是女性客户的最大利益。

这是一个非常具体的示例,可能根本与您的业务无关,但它确实显示了 A/B 测试如何对最终用户产生巨大影响。

如果没有心理学家进行适当的数据分析和研究,这个链接可能永远不会被发现。

那么道德 A/B 测试是什么样的?

关于 A/B 测试实验的预测结果,我们可以猜测所有我们想要的。

但在我们进行实验、取回准确数据并进行正确分析之前……我们根本不知道道德含义。

当然,有时这很明显,如果是,那么作为人类,我们有责任说出来并让我们的声音被听到。 无论是来自客户、代理机构还是进行测试的任何人。 但正如我们从预订网站的例子中看到的那样,有时实验的伦理意义很难看出。

这就是这里的信息。

人类行为是如此复杂,以至于我们经常会忽略我们的实验可能产生的广泛影响。 因为当我们不知道它时,我们就没有分析它。 如果我们不分析它,我们可能会推动损害人们财富、健康和幸福的测试。

进行 A/B 测试时应该考虑什么?

第一步是确保我们的数据完全可信,然后基于这些可信数据开始实验和分析,确保结果可信。

为了符合道德,我们唯一能做的就是严格分析测试可能产生的负面或有害影响。

下次你进行 A/B 测试时,问问自己这个道德问题。 现在,凭借您拥有的所有值得信赖的数据和知识,该测试会对您的最终用户产生负面影响吗? 如果您选择进行试验,请确保公司利益和用户利益一致。

虽然这是一件很难做到的事情。 考虑到我们的最终用户,我们必须用长期 KPI 衡量短期收益。

事实是,企业带来更多收入、客户终身价值和利润,而且他们在试验时做得更快

以实验为导向还可以节省大量时间和金钱,以验证基于 IT 资源带来的价值对 IT 资源进行最佳优先级排序的方法

我们只需要确保我们的成功指标包括业务和用户兴趣。 我们应该始终努力研究和分析我们行为的道德影响。

道德和用户兴趣作为商业指标的未来

越来越多的公司看到了向自己提出道德问题并将商业利益与用户和客户的利益和幸福保持一致的重要性。

当然,这绝不是非黑即白的,尤其是在道德 A/B 测试和推动业务增长的混沌水域中。

而且,不道德的从来不是策略,而是最终接受测试的人的意图和成本/收益分析。

事实是,我们首先需要可靠的数据——基于适当的研究和大型数据集。

下一步是确保我们的实验和结果分析准确无误。

此外,当我们考虑到最终用户并将我们的一些指标建立在测试对他们是好还是坏的基础上时,我们会帮助创建在世界上表现良好并长期存在的企业。

让我们用一些您可以立即处理的操作项来结束它。 您可以做些什么来确保您的测试符合道德并符合客户的最大利益? 以下几点可以为您提供更好的指导:

  1. 在理想情况下,您应该让行为心理学家通过研究分析和识别数据中的相关性。 但是,如果这是不可能的,那么请尽您所能深入研究数据和实验对最终用户可能产生的影响。 这就是你如何捕捉表面上看起来合乎道德但实际上可能造成伤害的测试。
  2. 在测试开始之前问自己道德问题,并鼓励团队成员在测试中有问题时说出来。 我们都是人类,具有不同程度的道德敏感性。 因此,对一个人来说越界的东西可能对另一个人来说就不是。 这就是为什么开放讨论和自由发言的环境可能是关键的原因。
  3. 猜测和意见只能带我们到此为止。 了解 a/b 测试结果及其伦理含义的唯一方法是进行实验并收集准确的数据。 用耐克的话来说,“就去做吧。”
  4. 当然,我们可以要求我们的用户以某种方式给予测试许可,甚至询问他们对测试的意见以及他们是否觉得被他们操纵。 但请记住,人们对商业道德的看法可能因国家而异。
  5. 查看您的 KPI,了解如何将业务目标与最终用户的健康、财富和幸福保持一致。 对于希望通过其平台获利的媒体公司来说,“在网站上花费的时间”是一个很好的衡量标准。 但是,在最终用户对您的品牌的体验的背景下,“花的时间”是一种更好的方式来看待货币化。 从长远来看,快乐和健康并从您的产品中获得价值的用户将始终提高生命周期价值并减少客户流失。

作为最终用户,我们将始终倾向于以我们最大利益为重的企业。 正是这些企业成为了在责任感和透明度不断提高的现代世界中蓬勃发展的品牌。

因此,让我问您一个问题,您的业务指标如何考虑客户的最大利益? 如果没有,你怎么能确保他们继续前进?