Переосмысление Picodata как cluster-first СУБД
Доклад принят в программу конференции
Целевая аудитория
Тезисы
Объемы обрабатываемой информации неуклонно растут, и распределенными системами уже сложно кого-либо удивить. В мир СУБД этот тренд проник с небольшим опозданием, но распределенных СУБД на рынке уже немало.
Отличаются они друг от друга почти всем, но в первую очередь нас интересует два основных компонента — это движок локального хранилища и кластер-менеджер. Так, например, в CockroachDB локальным движком выступает RocksDB, а консистентность кластера обеспечивает алгоритм Raft. В Cassandra ставка сделана на eventual consistency.
Команда Picodata долгое время разрабатывала и внедряла решения на основе Tarantool, а теперь мы переосмыслили его в cluster-first парадигме. В докладе я расскажу о продуктовых и архитектурных решениях, которые этому сопутствовали:
- Кластер-менеджер мы построили на Raft без использования внешнего state provider и объединили в нем хранение топологии и хранение схемы данных
- Для хранения данных мы используем глобальные и шардированные таблицы, а доступ к ним реализуем посредством языка SQL
- За компанию реализовали близкие к стандарту средства управления доступом
- А для расширения функциональности предоставляем Plugin API
Начинал с вычислительной гидродинамики, потом разрабатывал видеонаблюдение для ЕГЭ и выборов, а последние годы строит распределенные системы — сначала Tarantool Cartridge, теперь Picodata.
Picodata
Видео
Другие доклады секции
Базы данных и системы хранения