HighLoad++ 2024 - Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем

Быстрые Open Loop- и Closed Loop-симуляторы для автономного транспорта

Архитектура

C/C++

Распределенные системы

Архитектура данных, потоки данных, версионирование

Приёмочные и функциональные тесты

YTSaurus

3 декабря, 11:10, Зал «09. Сан-Паулу»

Google Outlook Apple

Доклад принят в программу конференции

Мнение Программного комитета о докладе

Рассказ спикера из Яндекса про обучение моделей для автономного транспорта. Сейчас модели обучают уже не только на реальных, но и на симулированных данных. Спикер расскажет, как они готовят эти данные и в реальном времени передают их ROS, которая «накатывает» миллионы километров.

Целевая аудитория

Для тех, кто разрабатывает или принимает качество симуляторов, автономного транспорта, кода для ROS.

Тезисы

Скачать презентацию Все презентации конференции

1. Зачем нам проезжать 1 млн километров каждую ночь в симуляторе?
2. В чем отличие Open Loop- и Closed Loop-симуляций и зачем они?
3. Как мы сделали одновременно детерменированное и многопоточное исполнение пайплайна на базе ROS.
4. Как мы запускаем распределенную симуляцию в YTsaurus.

Николай Поливанов

Яндекс

Занимается распределенными системами — как батчевыми, так и потоковыми.
Например, построил потоковую базу веб-поиска в Яндексе.

Яндекс

Яндекс — технологическая компания, которая создает инновационные продукты на основе машинного обучения и нейронных сетей. Команда талантливых математиков и программистов развивает самую популярную в России поисковую систему и более 85 пользовательских сервисов, которые помогают людям в повседневных заботах.

Видео

Другие доклады секции

Архитектура

Поиск и рекомендации Wildberries: почти миллион RPS, ML, персонализация и большинство запросов не через индексы

Александр Сидоров

Wildberries

API Gateway в Авито

Александр Данковцев

Авито

Быстрые кешбэки для быстрых платежей

Константин Гузаров

Мир Plat.Form (НСПК)

WASM: цель, устройство, перспективы

Владимир Хомутов

ВебСервер

Как управлять мегаполисом без СМС и регистрации. История одного пилота АСУДД

Арсений Сазанов

ИП Сазанов А.М.

Как проезжать миллион километров в YTsaurus

Владислав Долбилов

Яндекс Автономный транспорт

От 45 до 450 Gbit/s, или 10 лет эволюции архитектуры сетевых stateful-приложений

Павел Иващенко

TrafficSoft

Можем ли мы с базой, но без кэш-слоя в 2024 году?

Алексей Рыбак

devhands.io

Гибридный поиск на базе OpenSearch и Qdrant

Егор Прохоренко

Т-Банк

Как применить перколятор по назначению и не только

Владислав Сикач

Авито

Развивать B2C-сервис или сделать SaaS? Мы решили не выбирать — добавляем мультитенантность в «Яндекс Лавка»

Павел Подколзин

Яндекс Лавка

WebAssembly: от браузеров до хайлоада

Алексей Комисов

Positive Technologies

Добавляем ++ в Prometheus

Владимир Гурьянов

Deckhouse

Корпоративное обучение в области высоких нагрузок: подход devhands

Алексей Рыбак

devhands.io

Надежность на масштабе в 45 млн клиентов — инструменты и практики цифрового банка

Алексей Мерсон

Т-Банк

Как эволюционировала доставка данных для рекламного движка Яндекса: снижаем задержки от часов к минутам

Даниил Гавриловский

Яндекс

Как мы в Авито анализируем 5 миллионов трейсов и проводим архитектурный надзор

Иван Нещадин

Авито

Карта роста бэкендера

Алексей Рыбак

devhands.io

Архитектура видеозвонков Т-Банка

Евгений Фирстов

Т-Банк

Мобильные платежи «Мир»

Дмитрий Викулов

Мир Plat.Form (НСПК)

Кто сможет в 1M RPS? В забеге участвуют: Valkey, Redis, Memcached, PostgreSQL, MySQL ;)

Алексей Рыбак

devhands.io

Миллионы часов: поиск копий в VK Видео

Никита Кочетков

VK, ВКонтакте

Проектируем свою inhouse Feature Platform

Алина Баймашева

Домклик

Артефакты архитектуры. Какие, зачем и как их организовать

Наиль Миннахметов

МТС

Как не деградировать сервису подбора рекламы, когда мир сходит с ума

Артем Букин

VK Реклама

Машины состояний для товарных данных из YDB и очередей

Виталий Московкин

Яндекс Еда

wrk2/wrkx: особенности использования, coordinated omission и способы компенсации

Алексей Рыбак

devhands.io

Масштабирование в условиях неопределенности, или Как мы обновляли СберСпасибо

Мария Насырова

Сбер

Финтех: причины моей ненависти

Екатерина Лысенко

Независимый эксперт

Real-time A/B: как получать метрики по экспериментам на больших объемах данных здесь и сейчас

Данил Валгушев

Яндекс

Архитектура национального видеохостинга RUTUBE: как мы раздаем 5 Тбит/с со своего CDN

Эльдар Ниязов

RUTUBE

Как устроена Алиса нового поколения

Руслан Ахтариев

Яндекс

AppHost: как Яндекс организует взаимодействие сотен микросервисов

Константин Вуколов

Яндекс

От NSX к OVN: 4 года подготовки и успешная миграция облака «на лету»

Владислав Одинцов

K2 Cloud

Новый виток построения аналитики на встраиваемых базах

Александр Боргардт

bigdataduck

Выделение микросервиса из 15-летнего монолита. Приключение на 1 год

Станислав Кондратьев

hh.ru

Распределённые системы без «зауми»

Алексей Рыбак

devhands.io

Точный адрес — вечная боль! Адресный путь геораспределённого агрегатора курьерской доставки

Михаил Колосов

Газпромбанк.Тех

Легко ли раздать больше миллиона скидок за два дня? Как мы строили архитектуру промоакций на Яндекс Маркете

Анна Кустарева

Яндекс Маркет

Эволюция пайплайна метрик. Как менялась архитектура с ростом нагрузки

Руслан Боярский

T-Банк

Resource EXpress: как мы построили общую шину динамических ресурсов в Яндексе

Николай Гайворонский

Яндекс

PHP-FPM, (g)unicorn, Puma и uWSGI — будут больше не нужны

Валентин Бартенев

Web Server LLC

Как мы увеличили пропускную способность поиска картинок с помощью ML и изменения архитектуры

Денис Сахнов

Яндекс

Как масштабировать защиту от DDoS-атак на десятки миллионов RPS. Опыт Яндекса

Иван Тямгин

Яндекс

System Design Interview: казнить нельзя помиловать

Владимир Невзоров

Servicepipe

Как KION формирует в Realtime персональные рекомендации и витрины

Алексей Жиряков

KION, МТС Диджитал

Apache Kafka как единственное хранилище. Использование, проблемы, боль и последствия

Дмитрий Емельянов

Altenar