Расскажем об архитектуре системы А/Б тестирования в нагруженном проекте:
• как сегментировать пользователей и собирать метрики на разных платформах;
• где хранить и как анализировать бизнес-показатели, статистическую значимость и практики проведения тестирования;
• как и зачем внедрять тесты в процессы принятия решений и развития продукта.
A/B тесты в Superjob это:
• более миллиона пользователей ежедневно;
• десятки тестов “на бою”;
• несколько платформ: десктопная и мобильные версии сайта, почтовые рассылки;
• единая система хранения на основе аналитической БД HP Vertica;
• показатели и бизнес-метрики в реальном времени.