Depository of News

Гайд по switchback‑экспериментам: длина окна, кластеризация ошибок и мощность

newsdepo.com · world

Новый алгоритм может уверенно выигрывать A/B‑тест и не показывать ожидаемого эффекта после запуска, если эксперимент учитывает только пользователей, но игнорирует общий ресурс. В статье разбираемся, как работают switchback‑эксперименты, почему стандартный анализ даёт ложные выводы и как корректно оценивать результаты. Разобрать подход

Read full article →