#ab_testing — Public Fediverse posts
Live and recent posts from across the Fediverse tagged #ab_testing, aggregated by home.social.
-
Как мы подняли CTR с 3% до 8% заменой обложек: протокол реанимации YouTube-роликов
Привет, Хабр. Меня зовут Дмитрий Таланов, я основатель продюсерской группы Talanov Vision. Мы строим и масштабируем медиа-активы на YouTube для бизнеса и экспертов. Суммарно наши проекты сгенерировали более 670 млн органических просмотров. В этой статье я не буду говорить про «творчество» и «вдохновение». YouTube в 2025 году — это не телевизор, это поисковая система и рекомендательный движок, работающий на машинном обучении. И язык этого движка — математика. Главная проблема большинства корпоративных и экспертных каналов заключается в том, что они вкладывают сотни тысяч рублей в продакшн, свет и звук, но их ролики умирают на отметке в 500 просмотров. Причина в 90% случаев одна — провал по первой метрике воронки: CTR (Click-Through Rate) . Ниже я разберу наш технический протокол реанимации роликов , покажу, как правильно проводить A/B-тест обложек YouTube и как сдвиг CTR всего на 5% меняет экономику канала.
https://habr.com/ru/articles/1022592/
#youtube #ctr #алгоритмы_youtube #контентмаркетинг #видеомаркетинг #реанимация_роликов #аналитика #продвижение_на_youtube #дмитрий_таланов #ab_testing
-
Проблема подглядывания и последовательное А/Б тестирование
Хабр, привет! Сегодня узнаем, что такое проблема подглядывания и почему она появляется. Реализуем аналог метода Покока и критерий Вальда для последовательного тестирования. Посмотрим, можно ли одновременно подглядывать и контролировать вероятности ошибок при том же размере групп. Обсудим границы применимости последовательного тестирования.
https://habr.com/ru/companies/X5Tech/articles/926546/
#статистика #аналитика #анализ_данных #ab_testing #data_driven #data_science #abтестирование #проверка_гипотез
-
Мифы о байесовском А/Б тестировании
Хабр, привет! Сегодня сравним два подхода к А/Б тестированию: байесовский и частотный. Обсудим сложности в интерпретации p-value. Посмотрим, как можно учитывать дополнительную информацию через априорное распределение. Остановим тест раньше времени и решим проблему подглядывания.
https://habr.com/ru/companies/X5Tech/articles/900032/
#abтестирование #ab_testing #data_science #data_driven #анализ_данных #аналитика #статистика #проверка_гипотез #байесовский_подход #bayesian
-
История эволюции веб-сервиса: от примера из доки до космолета
5k RPS, 5ms Latency и 100 экспериментов одновременно. История о том, как наша команда перестраивала веб-сервис для сплитования трафика в высокопроизводительную систему. С какими ограничениями Cpython и Gil столкнулись на пути, как обходили "узкие места" и оптимизировали сервис до микросекунд. В общем, всё о том, как мы построили "космолет" на Python и взлетели! Ну и, конечно же, ответ на вопрос: "Почему не Go? ".