Учим Kibana работать с Clickhouse Базы данных и системы хранения
Руководитель группы разработчиков в EcommPay IT. Основной профиль - R&D.
Skype: yaroslav.sagan
email: sagan.yaroslav@gmail.com
C\C++, Golang-программист. Последние несколько лет занимается R&D вначале в авиационной отрасли, и затем в FinTech.
Skype: nickolay_nesterenko
email: n.nesterenko@it.ecommpay.com
Любая сложная система требует анализа и мониторинга, особенно если она отвечает за проведение финансовых расчетов. С ростом числа операций данных накапливается все больше, а объем информации, которую надо иметь под рукой, достигает десятков терабайт.
Стандартным решением для такого является ELK-стек. Но сейчас все большее распространение получает ClickHouse. Его обычно не рассматривают, т.к. из коробки в нём отсутствует полнотекстовый поиск. Но является ли это препятствием?
В своем докладе мы расскажем, как разрабатывалась инфраструктура для компактного хранения логов в ClickHouse и как по ним можно организовать удобный поиск и мониторинг, используя Kibana - популярный инструмент для просмотра и визуализации данных. А также про особенности такой системы.