#выбор_метрики — Public Fediverse posts

Пять ошибок при A/B-тестировании

Привет, Хабр! В A/B тестах можно ошибиться ещё до того, как первая строчка кода теста будет написана. А последствия этих ошибок сказываются не только на результатах одного эксперимента, а на всей продуктовой стратегии компании: на найме, на развитии функциональности, на распределении инвестиций. Сегодня рассмотрим пять системных ошибках, которые делают ваши A/B тесты ненадёжными — даже если снаружи всё выглядит корректно.

https://habr.com/ru/companies/otus/articles/904730/

#python #AB_тесты #статистическая_значимость #выбор_метрики #когортный_анализ #pvalue