Пайплайны записи своими руками: думали — велосипед, оказалось — паттерны Архитектуры и масштабируемость
Ведущий разработчик в Sage, платформе мониторинга Т-Банка. Специализируется на глубокой оптимизации производительности. Интересуется математикой, алгоритмами и Data Science.
Тезисы
Роман расскажет, как строить надежные конвейеры доставки данных до хранилищ. На примере доставки логов, метрик и трейсов вы узнаете, какие подходы и прикладные паттерны помогут написать код, готовый к отказам, как эксплуатировать и масштабировать пайплайны записи, к чему готовиться и чего не стоит бояться.
Каждый уровень и этап такого конвейера — результат многолетней эксплуатации под большой нагрузкой в Sage, платформе мониторинга и realtime-аналитики Т-Банка.
Из доклада в свою повседневную работу вы сможете забрать архитектурную диаграмму всего конвейера записи, детальную схему устройства критически важных компонентов, список полезных паттернов и примеры их применения в реальной системе.
