HighLoad++ 2024 - Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем

Архитектура хранилища рекламных объектов Яндекс.Директ

Базы данных и системы хранения

2 декабря, 14:40, Зал «11. Белу-Оризонти (2 этаж)»

Google Outlook Apple

Доклад принят в программу конференции

Мнение Программного комитета о докладе

Докладчик расскажет, как построить почти безгранично масштабирующееся хранилище данных, учесть требования поставщиков и потребителей, а благодаря использованию YTsausus реализовать эффективный стриминг изменений большому количеству разнородных потребителей.

Целевая аудитория

Разработчики баз данных, бэкенд-разработчики.

Тезисы

* Чем заменить MySQL или как превратить хеш-мапу в полноценную базу данных, привет YTsaurus.
* Всегда ли нужна нормализация данных?
* Потоковая обработка данных: per aspera ad astra.
* Версионирование данных — must have!
* Проблема размножения обновлений по иерархии объектов.

Булат Гайфуллин

Яндекс.Технологии

В разработке с 2006 года.
Имеет широкий опыт в разработке и эксплуатации высоконагруженных сервисов.
Сейчас отвечает за ядро стриминговых процессингов в Рекламных технологиях Яндекса.

Яндекс.Технологии

Яндекс — технологическая компания, которая создает инновационные продукты на основе машинного обучения и нейронных сетей. Команда талантливых математиков и программистов развивает самую популярную в России поисковую систему и более 85 пользовательских сервисов, которые помогают людям в повседневных заботах.

Видео

Другие доклады секции

Базы данных и системы хранения

Работа с топологией кластера Пикодата

Дмитрий Кибирев

Picodata

Итак, вы решили надежно записывать данные на диск

Дмитрий Родионов

Picodata

Dev Room Picodata. Шардирование с Picodata

Дмитрий Кольцов

Пикодата

Почтовые приключения с PostgreSQL: как приручить 650+ шардов и выжить

Кирилл Григорьев

Яндекс 360

Лес Меркла, или Как мы уменьшили объём метаданных на 83% и заодно ускорили поиск дубликатов в 10 раз в СХД TATLIN.BACKUP

Сергей Ли

YADRO

Движок распределённого SQL в СУБД Picodata: принцип его работы, принятые архитектурные решения и сравнение с аналогами

Эмир Вильданов

Picodata

Cloud-native-подход при работе с Ceph, или Как перестать бояться и начать деплоить

Игорь Шишкин

Рунити

Опыт использования Rust в разработке СУБД Picodata. В чём он нам помог и с какими сложностями мы столкнулись

Егор Ивков

Picodata

Плагины для Picodata

Дмитрий Кольцов

Пикодата

Динтаблицы YTsaurus — и ещё одна СУБД от Яндекса

Руслан Савченко

Яндекс

WebAssembly и хайлоад: история о том, как Tarantool стал полиглотом

Максим Кокряшкин

VK Tech, Tarantool

Как я удалил clickstream, но его восстановили из небытия

Дмитрий Немчин

Т-Банк

Valkey 8 — релиз форка Redis про performance

Евгений Дюков

Yandex Cloud

Аномалии под нагрузкой в PostgreSQL 2.0

Михаил Жилин

Postgres Professional

Путь к стабильным и быстрым дискам в Yandex Cloud

Даниил Татьянин

Yandex Cloud

Основы сопровождения Пикодата

Дмитрий Кибирев

Picodata

Архитектура хранилища ВКонтакте

Денис Дерюгин

VK, ВКонтакте

О геораспределённых транзакциях

Владимир Комаров

СберТех

Нетворкинг-зона «Базы данных и системы хранения»

Алексей Рыбак

devhands.io

Как на самом деле работает Apache Iceberg

Владимир Озеров

Querify Labs

Как объединять данные из разных СУБД и делать это эффективно

Виталий Исаев

Яндекс

Valkey: что это за зверь и потеснит ли он Redis?

Алексей Рыбак

devhands.io

Стоимостный оптимизатор в YDB — как, зачем и почему?

Павел Велихов

Yandex Cloud

Picodata: много маленьких данных

Константин Осипов

Picodata

Как нагрузить СУБД без нагрузочного тестирования в рамках миграции на PostgreSQL

Ярослав Киселёв

К2Тех

Демонстрация Redis/Valkey Cluster

Алексей Рыбак

devhands.io

Инкрементальные бэкапы в PostgreSQL при помощи Ptrack и Walsummarizer, или Bloom filter vs. roaring bitmap

Алексей Дарвин

Postgres Professional

Picodata Dev Room. Введение в Picodata

Евгений Митин

Пикодата

Транзакционная работа с топиками. Архитектура и сравнение решений в Apache Kafka и YDB

Алексей Николаевский

Яндекс