Подробное описание документа

Зотов Д. А., Пивоварова Н. В.
   Методологические проблемы и современные решения в области контролируемых онлайн-экспериментов / Зотов Д. А., Пивоварова Н. В. // Русский инженер, Международный конгресс, 3-ий : в 5 т. / МГТУ им. Н. Э. Баумана (национальный исследовательский университет). - 2026. - Т. 3 : Комплексная автоматизация проектирования и производства (КАПП-2025), Научно-практическая конференция (с международным участием), 3-я, Москва, 31 октября 2025 года : сборник статей. - С. 67-78.

В данной работе рассматриваются современные подходы и проблемы, возникающие при проведении контролируемых онлайн-экспериментов (также называемых A/B-тестами), являющихся ключевым инструментом для эмпирической проверки гипотез в цифровых продуктах. Несмотря на широкое распространение методологии в индустрии, ее применение сталкивается с рядом методологических и практических проблем. Особое внимание уделено анализу существующего инструментария для проек-тирования, выполнения и интерпретации онлайн-экспериментов, а также проблемам измерения малых эффектов, выявления гетерогенных эффектов и оценки долгосрочного влияния изменений. Работа систематизирует основные направления текущих исследований и формулирует открытые вопросы, требующие дальнейшего изучения.
Ключевые слова: A/B-тестирование, чувствительность экспериментов, гетерогенные эффекты, долгосрочные эффекты