Как из готовых инструментов сделать систему на петабайт данных
Доклад принят в программу конференции
Целевая аудитория
Тезисы
1. Intro. О проекте с большим количеством внешних систем для сбора данных.
2. Решаем, как будем собирать данные и как их обрабатывать.
3. Систематизация и хранение данных: готовые импортозамещенные инструменты.
4. Расскажу и покажу, почему не стоит париться из-за безопасности.
5. Почему бизнесу важно следить за проектом в реальном времени и принимать решения.
Реальный кейс о том, как я собрал такую систему, и в итоге все были счастливы — бизнес, разработчики и я =)
Я Паша Лукьянов — системный архитектор и Deputy CTO в AGIMA.
За 7 лет в IT я работал:
• на множестве проектов из разных сфер: наука, геология, трейдинг и т. д.;
• с большими клиентами: от Госуслуг до АльфаСтрахование.
Чем занимаюсь:
• разрабатываю сложные системы на Python, PostgreSQL, Docker, Redis и др;
• внедряю архитектурные подходы вроде C4-моделей, DDD и Clean Architecture;
• разбираюсь в сложных задачах и делюсь опытом: менторю коллег и выступаю на конференциях, например, на TechLeadConf, PiterPy и других.
Люблю нашу отрасль и стараюсь ее развивать, даже успел получить медаль М. В. Ломоносова за вклад в науку и инновации.
AGIMA
Видео
Другие доклады секции
Архитектура
