Поиск в видеоконтенте при помощи AI Нейронные сети и искусственный интеллект (data science)
Занимается машинным обучением в компании ГИД Дата, специализируется на задачах CV, NLP, MLOps . Кандидат технических наук.
Тезисы
В докладе я расскажу о том, какие фичи мы извлекаем, чтобы найти нужный кадр среди 40 тысяч видео. Что нужно сделать, чтоб векторная база при этом не распухла до ужасных размеров. О том, как заставить англоязычную мультимодальную модель понимать русский язык. Про борьбу с галлюцинациями Whisper и о том, как объединить результаты поиска по огромному массиву разнородных эмбеддингов.