Доклад

Экономика и A/B тесты

Спикеры

Артём Качалов

AvitoTech, Trisigma

Кому полезно

Продуктовые аналитики: для понимания методологических ошибок при расчете метрик (на примере CTR) и влияния этих ошибок на бизнес-решения. Продакт-менеджеры и владельцы продуктов: для осознания ценности централизации экспериментов и влияния A/B-тестирования на ключевые бизнес-показатели (AOV, выручка). Технические директора (CTO) и тимлиды: для принятия решений о построении платформы экспериментов (Build vs Buy) с учетом TCO и скрытых рисков.

О чём доклад

Проблема «зоопарка» метрик и отсутствия доверия: В докладе разбирается реальный кейс, когда два аналитика посчитали одну и ту же метрику (CTR) по-разному, получив противоположные результаты (Lift -18,3% и +8,83%). Мы обсудим, почему это происходит, и как централизация экспериментов на платформе устраняет методологические ошибки и «поиск виноватых».

Экономическая эффективность: когда платформа окупается?: Вы узнаете, как оценить целесообразность внедрения A/B-платформы, используя дерево решений «Build vs Buy». Мы разберем три сценария (SaaS, Open-source, собственное решение) и сравним их по срокам внедрения, TCO и скрытым рискам (вендор-лок, стоимость упущенных возможностей).

От теории к практике: расчет ROI: как на основе вводных данных (средний чек, количество экспериментов, средний lift) рассчитать реальный бизнес-эффект. Вы увидите, как выбрать решение, которое максимизирует прибыль, а не просто «покупает софт».

Видео