Перебалансировка без даунтайма в динтаблицах YTsaurus

Базы данных и системы хранения

7 ноября, 12:10, «Зал 4»

Google Outlook Apple

Доклад принят в программу конференции

Мнение Программного комитета о докладе

Мы рассчитываем, что слушатели доклада базово знакомы с тем, что такое Raft (хотя бы на уровне, что это «отказоустойчивый кирпичик»). Из доклада вы узнаете, как строить системы поверх множества автоматов, как правильно доставлять между ними сообщения, и какую пользу из этого можно извлечь.

Целевая аудитория

Разработчики баз данных, которые знают, что такое Raft, и хотят строить поверх него распределённые системы

Тезисы

Использование Raft-автоматов давно стало одним из стандартов индустрии для построения отказоустойчивых систем. В нашем докладе мы расскажем о том, как поверх автоматов построены динтаблицы YTsaurus — распределённая база данных класса NewSQL. На примере задачи балансировки шардов базы данных без даунтайма расскажем, как обеспечить жизнь нескольких тысяч автоматов в одном кластере и какие бывают протоколы передачи сообщений между автоматами.

Иван Смирнов

Яндекс, YTsaurus

Руководитель группы в динтаблицах YTsaurus. 12 лет пишу на C++ в Яндексе. В прошлом занимался спортивным программированием и преподавал алгоритмы в ВШЭ.

Видео

Другие доклады секции

Базы данных и системы хранения

2 DC 1 fail: как реализовать автоматический фейловер, когда данные в двух зонах доступности

Георгий Белянин

VK Tech, Tarantool

Как мы внедрили WebAssembly в SQL-движок динамических таблиц YTsaurus

Торилов Дмитрий Михайлович

Яндекс

Снапшоты своей файловой системы через LSM: с RocksDB легко, но есть нюансы

Александр Черепанов

YADRO

TTL данных в Яндекс Доставке: где закончился PostgreSQL и что вместо него

Валерий Кондаков

Яндекс Доставка

Миграция контента в KION: как перенести сотни ТБ без downtime

Никита Иванов

МТС Web Services (MWS)

Почему следует время от времени переписывать все компоненты СУБД с нуля

Павел Велихов

Yandex Cloud

Внедрение и развитие каталога данных в МТС BigData: практический опыт

Александр Полищук

МТС Web Services (MWS)

Неожиданные различия PostgreSQL и YDB: опыт перевоза процессинга Яндекс Такси

Игорь Березняк

Техплатформа Городских сервисов Яндекса

Как прокачать иопсы вновь: новый слой хранения для Vitastor

Виталий Филиппов

Личный проект

YTsaurus Shuffle Service: как повысить надежность и производительность тяжелых Spark-приложений

Антон Рыбьянов

Яндекс

«Прощай, Oracle! Здравствуй, Scylla!» — (совсем не) квантовый переход ленты уведомлений на Госуслугах

Сергей Олейников

РТЛабс

Винил снова в моде или история дискового движка в Tarantool

Сергей Бронников

VK, VK Tech, Tarantool

Федерация брокеров сообщений и как с ней экономить половину места

Андрей Серебрянский

YDB

Бесконечность – не предел: Как мы масштабируем единое хранилище Яндекса на десятки эксабайт

Александр Снопов

Yandex Infrastructure

Workshop: Собери Postgres себе на ноуте

Андрей Бородин

Yandex Cloud