Real-time обновление HNSW: последний шаг к свежим данным в RecSys
Подробнее о докладе
Другие доклады
- Гарантированная доставка на Госуслугах: миллиард доставленных заявлений в годСергей Станиславский
Спикеры
5 лет в IT. Начал путь с R&D в Computer Vision, но вскоре перешел в инфраструктуру рекомендательных систем в Яндекс Рекламе. Сейчас развивает контент систему рекламы делая ее более быстрой, гибкой и стабильной.
Отзыв программного комитета
Как обновлять HNSW-индексы на миллионы документов быстрее и с меньшими затратами CPU? На примере Яндекс Рекламы автор разберёт модифицированное обновление индекса с сохранением качества поиска и объяснит, при каких условиях этот подход полезен рекомендательным системам.
Кому полезно
Разработчики крупных рекомендательных систем: рекламных систем, рекомендаций маркетплейсов, рекомендаций видеосервисов.
О чём доклад
Последние несколько лет мы в Яндекс Рекламе активно мигрировали с MapReduce-технологий на real-time. Последним, что отделяло нас от полностью real-time-обновления индексов, оставалось full-state-обновление индексов HNSW, которые позволяют Яндекс Рекламе находить самые релевантные для пользователей объявления среди миллиарда объектов. В докладе расскажу, как мы с помощью нового алгоритма обновления индекса HNSW смогли перейти на полностью real-time-процессинг данных.