我要说明的一个重要问题是,即使您使用 p 值以原则方式测量 A / B 测试的结果,也不是福音。 实际上,有许多影响因素可能会扭曲实验结果,并导致您做出错误的决定。 让我们仔细研究其中的一些,让您知道如何注意它们。 让我们谈谈 A / B 测试的一些陷阱。
说 p 值为 1%听起来很正式,这意味着给定实验只有 1%的机会是由于虚假结果或随机变化引起的,但这并不是衡量成功与否的全部 做一个实验。 有许多事情可能会歪曲或混淆您需要注意的结果。 因此,即使您看到一个看起来很令人鼓舞的 p 值,您的实验仍然可能对您不利,并且您需要了解可以实现该目标的事情,以免做出错误的决定。
说 p 值为 1% 听起来很正式,这意味着给定实验只有 1% 的机会是由于虚假结果或随机变化引起的,但这并不是衡量成功与否的全部 做一个实验。 有许多事情可能会歪曲或混淆您需要注意的结果。 因此,即使您看到一个看起来很令人鼓舞的 p 值,您的实验仍然可能对您不利,并且您需要了解可以实现该目标的事情,以免做出错误的决定。