HighLoad++ 2024 - Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем

Быстрые Open Loop- и Closed Loop-симуляторы для автономного транспорта

Архитектура

C/C++

Распределенные системы

Архитектура данных, потоки данных, версионирование

Приёмочные и функциональные тесты

YTSaurus

3 декабря, 11:10, Зал «09. Сан-Паулу»

Google Outlook Apple

Доклад принят в программу конференции

Мнение Программного комитета о докладе

Рассказ спикера из Яндекса про обучение моделей для автономного транспорта. Сейчас модели обучают уже не только на реальных, но и на симулированных данных. Спикер расскажет, как они готовят эти данные и в реальном времени передают их ROS, которая «накатывает» миллионы километров.

Целевая аудитория

Для тех, кто разрабатывает или принимает качество симуляторов, автономного транспорта, кода для ROS.

Тезисы

1. Зачем нам проезжать 1 млн километров каждую ночь в симуляторе?
2. В чем отличие Open Loop- и Closed Loop-симуляций и зачем они?
3. Как мы сделали одновременно детерменированное и многопоточное исполнение пайплайна на базе ROS.
4. Как мы запускаем распределенную симуляцию в YTsaurus.

Николай Поливанов

Яндекс

Занимается распределенными системами — как батчевыми, так и потоковыми.
Например, построил потоковую базу веб-поиска в Яндексе.

Яндекс

Яндекс — технологическая компания, которая создает инновационные продукты на основе машинного обучения и нейронных сетей. Команда талантливых математиков и программистов развивает самую популярную в России поисковую систему и более 85 пользовательских сервисов, которые помогают людям в повседневных заботах.

Видео

Другие доклады секции

Архитектура

System Design Interview: казнить нельзя помиловать

Владимир Невзоров

Servicepipe

Проектируем свою inhouse Feature Platform

Алина Баймашева

Домклик

Кто сможет в 1M RPS? В забеге участвуют: Valkey, Redis, Memcached, PostgreSQL, MySQL ;)

Алексей Рыбак

devhands.io

Как устроена Алиса нового поколения

Руслан Ахтариев

Яндекс.Технологии

Добавляем ++ в Prometheus

Владимир Гурьянов

Deckhouse

wrk2/wrkx: особенности использования, coordinated omission и способы компенсации

Алексей Рыбак

devhands.io

Артефакты архитектуры. Какие, зачем и как их организовать

Наиль Миннахметов

МТС

Распределённые системы без «зауми»

Алексей Рыбак

devhands.io

Масштабирование в условиях неопределенности, или Как мы обновляли СберСпасибо

Мария Насырова

Сбер

Миллионы часов: поиск копий в VK Видео

Никита Кочетков

VK, ВКонтакте

Как мы в Авито анализируем 5 миллионов трейсов и проводим архитектурный надзор

Иван Нещадин

Авито

Новый виток построения аналитики на встраиваемых базах

Александр Боргардт

bigdataduck

API Gateway в Авито

Александр Данковцев

Авито

Как проезжать миллион километров в YTsaurus

Владислав Долбилов

Яндекс Автономный транспорт

Развивать B2C-сервис или сделать SaaS? Мы решили не выбирать — добавляем мультитенантность в «Яндекс Лавка»

Павел Подколзин

Яндекс Лавка

Карта роста бэкендера

Алексей Рыбак

devhands.io

Быстрые кешбэки для быстрых платежей

Константин Гузаров

Мир Plat.Form (НСПК)

Легко ли раздать больше миллиона скидок за два дня? Как мы строили архитектуру промоакций на Яндекс Маркете

Анна Кустарева

Яндекс Маркет

Resource EXpress: как мы построили общую шину динамических ресурсов в Яндексе

Николай Гайворонский

Яндекс

Real-time A/B: как получать метрики по экспериментам на больших объемах данных здесь и сейчас

Данил Валгушев

Яндекс

Точный адрес — вечная боль! Адресный путь геораспределённого агрегатора курьерской доставки

Михаил Колосов

Газпромбанк.Тех

Поиск и рекомендации Wildberries: почти миллион RPS, ML, персонализация и большинство запросов не через индексы

Александр Сидоров

Wildberries

Как управлять мегаполисом без СМС и регистрации. История одного пилота АСУДД

Арсений Сазанов

ИП Сазанов А.М.

Надежность на масштабе в 45 млн клиентов — инструменты и практики цифрового банка

Алексей Мерсон

Т-Банк

От NSX к OVN: 4 года подготовки и успешная миграция облака «на лету»

Владислав Одинцов

K2 Cloud

Гибридный поиск на базе OpenSearch и Qdrant

Егор Прохоренко

Т-Банк

Архитектура национального видеохостинга RUTUBE: как мы раздаем 5 Тбит/с со своего CDN

Эльдар Ниязов

RUTUBE

Машины состояний для товарных данных из YDB и очередей

Виталий Московкин

Яндекс Еда

Мобильные платежи «Мир»

Дмитрий Викулов

Мир Plat.Form (НСПК)

AppHost: как Яндекс организует взаимодействие сотен микросервисов

Константин Вуколов

Яндекс

Финтех: причины моей ненависти

Екатерина Лысенко

Независимый эксперт

Можем ли мы с базой, но без кэш-слоя в 2024 году?

Алексей Рыбак

devhands.io

Как не деградировать сервису подбора рекламы, когда мир сходит с ума

Артем Букин

VK Реклама

WebAssembly: от браузеров до хайлоада

Алексей Комисов

Positive Technologies

Как масштабировать защиту от DDoS-атак на десятки миллионов RPS. Опыт Яндекса

Иван Тямгин

Яндекс

Эволюция пайплайна метрик. Как менялась архитектура с ростом нагрузки

Руслан Боярский

T-Банк

Архитектура видеозвонков Т-Банка

Евгений Фирстов

Т-Банк

PHP-FPM, (g)unicorn, Puma и uWSGI — будут больше не нужны

Валентин Бартенев

Web Server LLC

Как мы увеличили пропускную способность поиска картинок с помощью ML и изменения архитектуры

Денис Сахнов

Яндекс

Apache Kafka как единственное хранилище. Использование, проблемы, боль и последствия

Дмитрий Емельянов

Altenar

Как эволюционировала доставка данных для рекламного движка Яндекса: снижаем задержки от часов к минутам

Даниил Гавриловский

Яндекс

Выделение микросервиса из 15-летнего монолита. Приключение на 1 год

Станислав Кондратьев

hh.ru

От 45 до 450 Gbit/s, или 10 лет эволюции архитектуры сетевых stateful-приложений

Павел Иващенко

TrafficSoft

Корпоративное обучение в области высоких нагрузок: подход devhands

Алексей Рыбак

devhands.io

Как применить перколятор по назначению и не только

Владислав Сикач

Авито

WASM: цель, устройство, перспективы

Владимир Хомутов

ВебСервер

Как KION формирует в Realtime персональные рекомендации и витрины

Алексей Жиряков

KION, МТС Диджитал