Потоковая обработка данных: разбираем архитектуры и предлагаем реализации
Наши команды создают инфру для потоковой обработки данных и с помощью этих систем решают продуктовые задачи в Яндексе. Поток, с которым они работают — гигабайты в секунду, размер стейта — петабайты данных. Наши эксперты расскажут:
· почему стриминг-подготовка данных — ключевое направление развития процессинга в ближайшие годы
· чем может помочь стриминг-парадигма
· как перейти в парадигму стриминга из MapReduce
· как спроектировать архитектуру стриминга.
Эксперты
Егор Хайруллин
Руководитель службы инфраструктуры рекомендательных систем.
Булат Гайфуллин
Руководитель службы хранения и обработки данных в рекламе.
Юлия Черткова
Руководитель службы подготовки и анализа больших данных.
Андрей Попов
Руководитель службы разработки инфраструктуры интернет-безопасности и противодействия мошенничеству
Роман Кулага
Руководитель группы разработки антифрода
Место проведения – стенд Яндекс