Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем

Переводчик с языка, на котором нельзя говорить и писать

Нейронные сети, искусственный интеллект

Распознавание речи, образов / Прикладное ML / Рекомендательные системы

Machine Learning

Доклад принят в программу конференции

Мнение Программного комитета о докладе

Два Александра из Сбердевайсов решают необычную задачу: они делают сервис для распознавания и генерации «жестового языка». Данных нет, язык не имеет почти ничего общего ни с привычным русским языком, ни даже с «голосовыми» языками вообще. Что делать? Собирать датасеты и экспериментировать!

Целевая аудитория

Data Science-инженеры и исследователи, занимающиеся обучением моделей в области компьютерного зрения (CV) и NLP, специалисты в области разработки моделей глубоких нейронных сетей, научные сотрудники вузов и исследовательских лабораторий, носители русского жестового языка.

Тезисы

Представьте себе мир, где слова не используются для общения! Наш доклад раскрывает секреты создания переводчика для языка, которым нельзя говорить и писать. Узнайте, почему русский жестовый язык (РЖЯ) — не просто жесты, а мощный инструмент передачи абстрактных понятий. Какие трудности возникают при переводе РЖЯ и как их преодолеть? Будьте первыми, кто узнает о новых данных и инновационных подходах, основанных на нейросетях! Не упустите шанс овладеть новым языком — языком жестов! Готовы ли вы открыть дверь в мир без слов и звука? Мы расскажем о проблемах и особенностях русского жестового языка и как мы решаем эту задачу в нашей команде. В качестве бонуса выкладываем большой датасет в открытый доступ, что поможет ускорить реализацию AI-сервисов распознавания и генерации РЖЯ!

Руководит исследовательскими ML-командами в SberDevices. В прошлом инженер-железячник в области цифровой обработки сигналов на FPGA и ASIC, в частности, для обработки изображений и звука. Автор топовых лекций по обработке сигналов и регулярный спикер на научно-технических конференциях. Активный контрибьютор в Open Source.

SberDevices

SberDevices — российская IT-компания полного цикла. R&D-центр экспертизы в области искусственного интеллекта: речевые технологии, понимание естественного языка, компьютерное зрение, лицевая и голосовая биометрия. Производит умные устройства, разрабатывает высокотехнологичные сервисы для бизнеса, делает масштабные ML-проекты, LLM, высоконагруженные системы и технологии обработки Big Data. В портфолио SberDevices — SberBox, SberJazz, GigaChat, Kandinsky и другие легенды.

Главный инженер по разработке в SberDevices. Инженер компьютерного зрения, эксперт машинного обучения, дата-сайентист.

SberDevices

SberDevices — это компания полного цикла. Мы создаём идеи, самостоятельно разрабатываем продукты, занимаемся прототипированием, конструированием, придумываем дизайн, программные решения, контролируем качество на фабриках и создаём инструменты для аппаратного тестирования. Перед SberDevices стоит амбициозная задача: сделать новейшие технологии максимально доступными в повседневной жизни, помочь им раскрыться и практически, и коммерчески.

Видео

Другие доклады секции

Нейронные сети, искусственный интеллект