DataLakeHouse на 10000 пользователей

Базы данных и системы хранения

Программный комитет ещё не принял решения по этому докладу

Целевая аудитория

Разработчики в области данных, руководители в области Data/AI

Тезисы

Мы расскажем про практический опыт построения DataLakeuse на k8s/s3. Вас ждет захватывающая история миграции с огромной инсталляции GP на современных стек В докладе затронем 1) уникальный технологический ланшафт платформы прошлого поколения и предпоссылки перехода 2) реальная история миграции и ее боли 3) технические проблемы масштабировании до достаточно больших объемом(десятки петабайт и 10к МАУ)

Михаил Марюфич

Т-Банк

Руководитель направления DataLakeHouse
10 лет опыта в данных и МЛ, ранее руководитель платформы данных в Одноклассниках

Видео

Другие доклады секции

Базы данных и системы хранения

История чата — не память! Провенанс, версии, права и аудит: общая память для нескольких агентов поверх графовой СУБД.

Лысцов Никита Александрович

Codeinside

Простой фасетный поиск в YDB своими руками: зачем и как

Антон Пионтковский

Yandex Cloud

Параллельная заливка данных в PostgreSQL и Почему это утопия

Софья Копикова

Postgres Professional

База тормозит при вставке: причины, проблемы и их решения

Софья Копикова

Postgres Professional

PostgreSQL и Агенты. Как не убить базу и ускорить разработку.

Константин Ващенков

ООО Хи-Квадрат

Запись в ClickHouse без остановки для смены лидера: как мы переехали на ClickHouse Keeper в продакшене без потери метаданных

Гончаров Никита Юрьевич

Yandex Cloud

Cassandra 5: долгожданный обзор

Владимир Хростицкий

Мир Plat.Form

JOIN на поисковом индексе

Михаил Хлуднев

Рексофт

2,5 млрд событий в день в DWH онлайн и без потерь: архитектура EventStream из Kafka в ClickHouse

Серов Ярослав Валерьевич

MAGNIT OMNI

10 способов сломать хранилище, о которых вам не расскажут в документации

Анна Короткова

Флант

Хранилище репозитория на BTRFS

Михаил Новосёлов

НТЦ ИТ РОСА

Бэкап апокалипсис: ищем альтернативные решения для БД размером в 100+ терабайт, когда стандартные решения бессильны!

Андрей Комягин

STM Labs

За пределами EXPLAIN: как увидеть выполнение запроса вживую в Greenplum/Cloudberry

Алексей Рожок

Яндекс

Догоняй, catchup! Как быстро синхронизировать отставшие MongoDB-совместимые реплики

Илья Ковальчук

Yandex Cloud

Фрагментация базы RocksDB в условиях высоконагруженного Ceph кластера: причины, последствия и пути решения

Евгения Тарашкевич

K2 Cloud

Диагностируем ClickHouse - когда запросы пишет AI-агент из PostgreSQL в ClickHouse

Кузьма Лешаков

Яндекс Облако

Postgres pro KVik: учим postgres кэшировать правильно

Владислав Ахмедов

Postgres Pro

Дайджесты для фоновой компактификации динамических таблиц YTsaurus

Артём Давыдов

Яндекс

Векторный, полнотекстовый и гибридный поиск в YDB: контекст для моделей на реальных данных

Александр Зевайкин

YDB

Топики или очереди? Или все вместе? На примере Kafka и YDB

Андрей Серебрянский

YDB

Автобалансировщик нагрузки для Valkey

Даниил Кашапов

Yandex Cloud

Как поменять ссылку у миллиона баннеров и не сломать сервис

Булат Гайфуллин

Яндекс.Технологии

Managed Service for Valkey изнутри: как мы выжили на тысячах хостов

Евгений Дюков

Yandex Cloud

Шардирование ClickHouse без мифов: как измерить его цену на реальной нагрузке и спроектировать дальнейшее масштабирование

Михаил Филимонов

Magnit OMNI

Хождение за три пулера

Денис Пантилеенко

МАКСИМ Технология

Больше чем одно ядро: как Tarantool стал многопоточным

Владимир Давыдов

VK Tech

Воркшоп: ускорение антифрода в прямом эфире

Владимир Комаров

-

Тонкости архитектуры in-memory: сколько стоит Redis-кластер и чем тут поможет Dragonfly

Мария Девятых

RWB

Читаем с реплики в 2026

Андрей Бородин

Yandex Cloud

За пределами EXPLAIN: как увидеть выполнение запроса вживую в Greenplum/Cloudberry

Алексей Рожок

Яндекс

Два стула отказоустойчивости Redis: Sentinel и Cluster

Николай Савенко

Altenar

Можно ли заменить MongoDB на PostgreSQL и не переписать весь продукт

Игорь Лепешкин

Yandex B2BTech

Актуальность данных в Tarantool Column Store

Егор Марков

VK Tech

“Телепортация высоконагруженной АБС Платформа FXL с Оракла в гео кластер на основе Platform V DataGrid, Platform V Ocean DB”

Александр Борискин

АО "ФлексСофт"