p-значення вимірює ймовірність отримання спостережуваних результатів, припускаючи, що нульова гіпотеза вірна. Чим нижче значення p, тим більша статистична значущість різниці, що спостерігається. P-значення 0,05 або менше зазвичай вважається статистично значущим.
значення ймовірності Значення р, або значення ймовірності, повідомляє вам, наскільки ймовірно, що ваші дані могли мати місце за нульовою гіпотезою. Це робиться шляхом обчислення ймовірності вашої тестової статистики, яка є числом, обчисленим статистичним тестом з використанням ваших даних.
P-значення менше або дорівнює попередньо визначеному рівню значущості (часто 0,05 або 0,01) вказує на статистично значущий результат, тобто спостережувані дані є переконливими доказами проти нульової гіпотези. Це свідчить про те, що досліджуваний ефект, швидше за все, представляє реальний зв’язок, а не просто випадкову випадковість.
значний Якщо p-значення менше 0,05, це оцінюється як «значне”, і якщо p-значення більше 0,05, воно оцінюється як “незначне”. Однак, оскільки ймовірність значущості є значенням, яке встановлює дослідник відповідно до обставин кожного дослідження, вона не обов’язково повинна бути 0,05.
Потім ми дивимося на дані та бачимо, чи вони насправді рівні, наскільки ймовірно ми отримаємо отримані дані. Це p-значення. Отже, якщо у вас значення p 0,2, це означає, що якщо базові дані однакові, через випадковість, білий шум, ви отримаєте такі ж результати, як ваші, у 20% випадків.
Іншими словами, P-значення говорить вам, наскільки ймовірно, що ваші результати A/B-тесту є результатом випадкової варіації, а не справжнього ефекту вашого втручання.