Профессиональная конференция разработчиков высоконагруженных систем

Стенд метрик: как построить архитектуру для расчета тысячи метрик и попасть в SLA

Архитектуры и масштабируемость

Архитектура данных, потоки данных, версионирование
Архитектуры / другое
A/B-тестирование
Hadoop

Доклад принят в программу конференции

Целевая аудитория

Технические специалисты, архитекторы, математики-аналитики(DataScience) и все, кому интересно, как обеспечитьрасчет тысячи метрик на примере ее реализации в большой компании

Тезисы

Важной особенностью A/B-тестов является то, что они находятся на пересечении нескольких областей:
* бизнеса (проверка гипотез, базовый инструмент аналитика),
* математической (статистическая значимость)
* технической (обработки терабайтов данных и попадание в SLA).

В своем докладе, я расскажу про техническую реализацию стенда метрик, который обеспечивает расчет порядка тысячи метрик для всех экспериментов в компании Озон.

А именно:
* как стенд метрик для команды поиска превратился в центральный инструмент расчета метрик всей компании
* как попасть в SLA: про три итерации в эволюции архитектуры стенда метрик
* про DataQuality
* особенности баг фикса и инцидентов при работе с большими данными
* про особенности взаимодействии с математиками-аналитиками, которые обеспечивают инновационные расчеты

И конечно о продуктовом подходе в стенде метрик и процессах, без которых результаты расчета не играют никакого значения

Руководитель отдела разработки платформы A/B-тестов. Опыт в программировании 10+ лет, опыт в менеджменте 5+

Ozon

Ozon — лидирующая платформа e-commerce в России. В команде Ozon Tech 3 800 инженеров — и она продолжает расти. Десятки миллионов людей пользуются сервисами Ozon, их IT-инфраструктура управляет миллионами процессов каждый час. Микросервисы на Go и C#, в стеке технологий есть Vue.js, Swift и Kotlin, Kubernetes, Kafka, Hadoop и ClickHouse.

Видео

Другие доклады секции

Архитектуры и масштабируемость