Сколько вариаций нужно проверить в A/B тестировании?

Проблема множественных сравнений

  • Критерий Фишера
  • Поправка Бонферрони
  • Ожидаемая доля ложных отклонений гипотез
  • Поправка Шидака

Что если увеличить число вариаций?

Что если уменьшить число вариаций?

Ошибки выборки

Трафик и время

А где же золотая середина?

Факторы, определяющие количество вариаций

Относитесь к своим ресурсам внимательно

Заключение

--

--

--

Идеи, которые нас вдохновляют, видео-интервью и переводы исследований, которые были нам полезны в процессе работы. http://blog.aic.ru/

Love podcasts or audiobooks? Learn on the go with our new app.

Get the Medium app

A button that says 'Download on the App Store', and if clicked it will lead you to the iOS App store
A button that says 'Get it on, Google Play', and if clicked it will lead you to the Google Play store
aic blog

aic blog

Идеи, которые нас вдохновляют, видео-интервью и переводы исследований, которые были нам полезны в процессе работы. http://blog.aic.ru/

More from Medium

Initiatives versus Experiments

The Visible Divinity — part three

[ENG] Researching Review : Engines of Fury

Term 2 — Individual Project Update 1