Почему ваш A/B-тест врёт: 5 ловушек p-value
3 минуты чтения
Peeking, множественные сравнения, низкая мощность и ещё две причины, почему p < 0.05 — это не гарантия правды. Разбираем с формулами и кодом.
2 статьи
Peeking, множественные сравнения, низкая мощность и ещё две причины, почему p < 0.05 — это не гарантия правды. Разбираем с формулами и кодом.
Как перейти от p-value к вероятности, что B лучше A. Теорема Байеса, Beta-Binomial модель и честное сравнение двух подходов.