Проектируем api gateway на 2.5 миллиона RPS

Архитектура и масштабируемость

Архитектурные паттерны

Отказоустойчивость

Методы и техника разработки ПО

GO

Оптимизация

Теория

Программный комитет ещё не принял решения по этому докладу

Целевая аудитория

Инженеры и архитекторы, которые пишут высоконагруженные сетевые сервисы на Go и хотят защитить систему от перегрузок.

Тезисы

Я расскажу о том, какими паттернами руководствоваться при проектировании и реализации высоконагруженного прокси-сервера, чтоб обеспечить плавную деградацию вместо падений по ООМ. Выставление конкретных лимитов на одиночные запросы в системе, где идут миллионы RPS, может привести к отказу. Поговорим о том, как этого избежать и как думать о системе целиком. Правильная единица защиты не запрос, а процесс целиком. Разберем на практике как считать бюджет памяти процесса, почему семафора на память недостаточно без отдельного лимита на количество соединений.

Никита Галушко

VK, ВКонтакте

Вот уже 10 лет плотно сидит на Go. Пишет разной степени сложности бэкенды и насаждает Effective Go где только возможно :)

Видео

Другие доклады секции

Архитектура и масштабируемость

Отечественная кластерная суперкомпьютерная OS: Правда или вымысел

Сторожилов Илья

КуБорд (ООО "ОКТ")

Как мы превратили рекламный движок в распределённый кеш и сэкономили треть железа

Артемий Новиков

Яндекс

Отказоустойчивость как инструмент для оптимизации инфраструктурных расходов

Сергей Лавров

Авиасейлс

Как верифицировать сделанное агентом

Хабибуллин Ринат

ООО Коди

От реалтайм-метрик А/Б к платформе RT-сигналов: как устроен CORTe

Ставро Гаязов

Яндекс

От файла до премьеры: архитектура видеопроцессинга под большой нагрузкой

Николай Тиунов

Яндекс

Capacity planning по ТЗ на годы вперёд

Алексей Ивахин

ООО МТТЕХ

Exactly once - где она обитает?

Андрей Цветцих

Т-Банк

Behaviour Trees в инфраструктуре: как мы переписывали стейт-машину хостового агента деплой-платформы

Сергей Курганов

Yandex Infrastructure

Как масштабировать DQ после внедрения базовой автоматизации

Дарья Герасина

Инновационный центр "Безопасный транспорт"

Low-code AI Workflows — потолок надежности. Как мы строили durable execution и не сошли с ума

Владислав Янковский

Cloud.ru

Ускоряем кандидатогенерацию Рекламы Яндекса: три шага к потоковой обработке

Руслан Кулагин

Яндекс.Технологии

Когда Kubernetes уже не при чём: три расследования масштабируемости в облаке

Кирилл Наливкин

Yandex Cloud

IPSec VPN на скоростях NGFW: как выжать максимум из железа и не потерять в безопасности

Алексей Дядин

АО ТризТех

Как приземлить форк LangFlow на банковский Энтерпрайз: от инструмента ai автоматизации для сотрудников до масштабируемого ассистента на миллион клиентов

Георгий Дьячков

Альфа-банк

Три архитектуры одного агента-аналитика: как выбрать между монолитом, собственным рантаймом и открытым фреймворком

Дмитрий Ширшов

Альфа-Банк

io_uring бесполезен в nginx? – Как мы переосмыслили ввод-вывод, создав новый event-модуль для Angie.

Родион Николов

Angie Software

От раскопок до космоса: permission-система без RBAC, которая вытащила нас из 2-летнего слоя if-ов и не тормозит, когда права плодятся

Анна Ланда

ecom.tech

Система не упала. Она опоздала: как данные становятся бесполезными раньше, чем сервис становится недоступным

Евгений Сулейманов

ПрозиТех

Ни пакета мимо: Новый подход к live-миграции виртуальных машин

Александр Попов

VK Tech, VK Cloud

Как мы построили NRT-отчётность в Альфа-Банке: Debezium, Kafka, Flink, Tarantool

Даниил Забияка

АО Альфа-Банк

Разработка через капсулы: от аккумуляции инженерного опыта до передачи его AI-агентам

Сергей Кучин

Lad

HypEx на Spark: как мы масштабировали проведение пилотов

Антон Катков

Сбер

Новый стек, прежний масштаб: считаем, кто из десятков миллионов клиентов увидит рекламу

Софья Калинина

Ростелеком ИТ

Миграция системы авторизации и аутентификации Госуслуг c Oracle на PostgreSQL

Громов Петр

РТЛабс

Адаптер к оракулу: как спрятать хаос внешнего протокола за стабильным контрактом

Борисова Дарья Игоревна

ПСБ

Итак, вы решили сделать аудит: практическое руководство по разбору боевой высоконагруженной системы

Павел Лукьянов

Itogo.app

Опыт миграции данных из Oracle через Debezium в PostgreSQL : 200+ связанных таблиц одним махом.

Владимир Лытарь

РТЛабс

Data-Oriented Design в бэкенде: как уплощение структур и SoA экономят сотни ядер CPU

Иван Синицын

Ozon Tech

Нужны ли 1000 архитекторов для управления ИТ-ландшафтом в 1000+ систем. Проверка концепции

Николай Бардушко

Банк ВТБ

Анти-HighLoad: как мы построили SaaS на 15 антипаттернах и выжили

Борис Лактюшин

ОринаТех

FinCPU: убираем транзакционную БД из hot path финансового процессинга

Алексей Яговкин

Яндекс

Поиск 360: как готовить поиск к агентской нагрузке на примере почты и календаря

Иван Дудинов

Яндекс 360

Переход в проектировании от системного подхода к средовому

Руслан Сафин

Бындюсофт

Платформа для «энтерпрайз-вайбкодинга»: как, почему, с кем и зачем мы прыгнули в открытый космос

Александр Сербул

Битрикс24

Архитектура как код: жизнь в эпоху ИИ (предварительное название)

Никита Киселев

Независимый спикер

Миллионы транзакций в день - как с этим справиться и не пропустить мошенников?

Арнольд Сааков

Альфа банк

Краш-тест своего хранилища артефактов: от методики до результатов

Дмитрий Ключников

CodeScoring

Разработка распредееленного карточного процессинга и масштабирование под нагрузкой

Руслан Маркелов

Сбер

Один медленный webhook тормозит всех: как изолировать доставку без очереди на каждого получателя

Антон Лаврентьев

Яндекс

Хаос-инжиниринг требований: системный анализ для архитекторов, переживших production

Борисова Дарья Игоревна

ПСБ

Как мы изобрели светофор в кластере Ignite

Денис Старакожев

Магнит

150 млн событий и 10 мс на инференс: строим data-intensive систему без вендорных иллюзий

Олег Проскуряков

ВТБ

Конфигурация без кворума: causal consistency поверх асинхронной мастер-мастер репликации

Олег Бабин

Веб-Сервер (Angie Software)

Гарантированная доставка на Госуслугах: миллиард доставленных заявлений в год

Сергей Станиславский

РТЛабс

От зарядной станции до городской платформы: как построить цифровую экосистему электрозарядной инфраструктуры

Гусейн Римиханов

МТТЕХ

io_uring бесполезен в nginx? – Как мы переосмыслили ввод-вывод, создав новый event-модуль для Angie.

Родион Николов

Angie Software

Как мы настроили Elasticsearch на 35 тыс+ RPS и улучшили бизнес-процессы

Владимир Панчук

АО Альфа-Банк

Keeping Data Consistent in EDA: Lessons from Building Our Event Store

Иван Базалий

ati.su

Как укротить 100 000 событий/сек с помощью SQLite, Docker и Claude

Алексей Захаров

Positive Technologies

Платформа транзакционных данных и банковских документов: предпосылки, состав, архитектура и немного про AI

Лев Осипов

Райффайзен Банк

Декомпозировать нельзя остановиться: как мы Биллинг Яндекс 360 делили

Илья Иванов

Яндекс 360

AI-дубляж видео без обязательного дата-центра: гибридный пайплайн

Дмитрий Плотников

RevovoxAI

Как устроен стриминг агента в чат поддержки

Олег Мифле

Т-Банк

Гибридная схема балансирования нагрузки, или как не выбирать между адаптивностью, надежностью и resilience

Павел Михайлик

Инфосистемы Джет

One-cloud VK: эволюция облачной платформы от сервиса для Одноклассников до ядра всей инфраструктуры компании

Руслан Исмагилов

VK

Как общие папки влезли в существующий движок синхронизации Диска

Дмитрий Соломонов

Yandex 360

SAST за 5 месяцев вместо 5 лет: Как freestanding Zig победил TTM и OOM на Enterprise-масштабах

Кирилл Орлов

Независимый исследователь

Как мы управляем сетевыми и локальными дисками в MWS Cloud Platform

Дмитрий Анисов

MWS Cloud Platform

Эволюция борьбы с гонками в WMS Ozon: как мы обрабатываем миллионы операций и избегаем рассинхронизации данных

Максим Рауба

Ozon

От Event Driven к гарантированной консистентности

Наумченко Николай

X5 Tech

Конвергентная архитектура как основа Web4

Дмитрий Карловский

Giper Dev