Основы масштабирования и кластеризации Основная секция
Доклад принят в Программу конференции
Мы - разработчик Proto Observability Platform - первой российской full stack observability платформы, и сервис-провайдер c более 10 лет опытом выполнения проектов по цифровой трансформации, кибербезопасности, облачным вычислениям, разработке программных продуктов на основе стека современных технологий.
Тезисы
Если посещаемость сайта успешно растет, то он довольно быстро сталкивается с нехваткой производительности одного сервера. Но для решения этой проблемы недостаточно просто купить несколько серверов - надо сделать так, чтобы они работали вместе.
Мы покажем, из каких типичных частей состоит архитектура большинства сайтов, где могут быть узкие места, и где, собственно, требуется масштабируемость. Рассмотрим различные типы распределенных архитектур (от отсутствия масштабируемости к неограниченно-масштабируемым решениям) и методы балансировки (как правильно распределить нагрузку между несколькими экземплярами web-сервера, базы данных, файлового хранилища). Поговорим о способах хранения различных данных: как хранить основные данные в реляционных СУБД; как эффективно организовать хранение файлов, фотографий и видеороликов пользователей; как работать с быстро меняющимися данными. Упомянем также кэширование и увидим, где и как его следует применять. Ну и, конечно, обсудим реальные ситуации, разберем проблемы и поговорим на другие интересующие вас темы!
Другие доклады секции Основная секция
Raft AI Labs — это подразделение компании Raft, специализирующееся на разработке и интеграции решений с использованием новейших AI-технологий. С помощью передовых технологий и инновационных подходов они преобразуют и оптимизируют бизнес-процессы, повышая их производительность и эффективность.
SberDevices — это компания полного цикла. Мы создаем идеи, самостоятельно разрабатываем продукты, занимаемся прототипированием, конструированием, придумываем дизайн, программные решения, контролируем качество на фабриках и создаем инструменты для аппаратного тестирования. Перед SberDevices стоит амбициозная задача: сделать новейшие технологии максимально доступными в повседневной жизни, помочь им раскрыться и практически, и коммерчески.
Практические методики нагрузочного тестирования, опыт тестирования производительности веб-приложений
Гринатом – ИТ-компания в структуре Росатом с фокусом на разработке инновационных решений для современных бизнес-процессов в атомной отрасли и за ее пределами. Мы развиваем цифровую экосистему Росатома, создаем свое ПО и обеспечиваем атомную отрасль современными ИТ-решениями, услугами и сервисами.
«Сфера» — универсальная экосистема продуктов для производства технологических решений, которая включает в себя более 40 инструментов для управления разработкой, тестированием, эксплуатацией программного обеспечения, а также инженерных инструментов для работы с исходным кодом и инструментами мониторинга рабочих станций и анализа бизнес-процессов.
Гринатом – ИТ-компания в структуре Росатом с фокусом на разработке инновационных решений для современных бизнес-процессов в атомной отрасли и за ее пределами. Мы развиваем цифровую экосистему Росатома, создаем свое ПО и обеспечиваем атомную отрасль современными ИТ-решениями, услугами и сервисами.
VK — это более 200 технологичных проектов, свыше 11 000 сотрудников и более 20 лет опыта создания высоконагруженных интернет-сервисов. ВКонтакте, Одноклассники, VK Cloud, Дзен, Маруся, VK Play — это лишь часть продуктов VK, которыми ежедневно пользуются миллионы людей по всей стране.
IT-компания и основной цифровой партнер торговых сетей и бизнесов X5 Group. Команда из более 3500 специалистов разрабатывает решения, которые помогают 325 тысячам сотрудников группы работать с максимальным технологическим комфортом, а миллионам покупателей быстро и удобно покупать свежие продукты.
SberDevices — это компания полного цикла. Мы создаем идеи, самостоятельно разрабатываем продукты, занимаемся прототипированием, конструированием, придумываем дизайн, программные решения, контролируем качество на фабриках и создаем инструменты для аппаратного тестирования. Перед SberDevices стоит амбициозная задача: сделать новейшие технологии максимально доступными в повседневной жизни, помочь им раскрыться и практически, и коммерчески.
Почтатех — дочерняя IТ-компания Почты России, созданная в 2016 году. Через их сервисы проходят петабайты данных, а в портфолио — цифровые продукты, которыми пользуются миллионы людей по всей стране. Портал и приложение Почты, логистические системы, софт для отделений — это лишь часть того, что они разрабатывают и поддерживают.
VK — это более 200 технологичных проектов, свыше 11 000 сотрудников и более 20 лет опыта создания высоконагруженных интернет-сервисов. ВКонтакте, Одноклассники, VK Cloud, Дзен, Маруся, VK Play — это лишь часть продуктов VK, которыми ежедневно пользуются миллионы людей по всей стране.
ВКонтакте — крупнейшая социальная сеть в России и странах СНГ. Мы ставим перед собой масштабные вызовы и делаем технологии доступными для каждого пользователя. ВКонтакте помогает решать любые повседневные задачи — и даже больше!
Яндекс — технологическая компания, которая создает инновационные продукты на основе машинного обучения и нейронных сетей. Команда талантливых математиков и программистов развивает самую популярную в России поисковую систему и более 85 пользовательских сервисов, которые помогают людям в повседневных заботах.
Создают цифровой банк с лучшим пользовательским опытом, персонализацией продуктов и быстрым внедрением изменений. У них все быстро и просто: принимайте решения сами и смотрите, как на ваших глазах строчки кода превращаются в реальную пользу для клиентов.
VK — это более 200 технологичных проектов, больше 11 000 сотрудников и безграничные возможности проявить себя. Компания создает современные и быстрые интернет-сервисы, доступные каждому.
YCLIENTS — лидер среди SaaS-решений для автоматизации бизнеса в сфере услуг и онлайн-записи. Предоставляют мощную облачную ERP экосистему.
Экосистема для бизнеса.
Raft AI Labs — это подразделение компании Raft, специализирующееся на разработке и интеграции решений с использованием новейших AI-технологий. С помощью передовых технологий и инновационных подходов они преобразуют и оптимизируют бизнес-процессы, повышая их производительность и эффективность.
«Рексофт» — одна из ведущих компаний по разработке программного обеспечения и информационных систем, обладающая значительным опытом по созданию проектов для таких сфер бизнеса, как телекоммуникации и мобильная связь, банки и финансы, IТ, медиа, гостиничный бизнес и туризм.
Яндекс — технологическая компания, которая создаёт инновационные продукты на основе машинного обучения и нейронных сетей. Команда талантливых математиков и программистов развивает самую популярную в России поисковую систему и более 85 пользовательских сервисов, которые помогают людям в повседневных заботах.
Яндекс — технологическая компания, которая создает инновационные продукты на основе машинного обучения и нейронных сетей. Команда талантливых математиков и программистов развивает самую популярную в России поисковую систему и более 85 пользовательских сервисов, которые помогают людям в повседневных заботах.
«Рексофт» — одна из ведущих компаний по разработке программного обеспечения и информационных систем, обладающая значительным опытом по созданию проектов для таких сфер бизнеса, как телекоммуникации и мобильная связь, банки и финансы, IТ, медиа, гостиничный бизнес и туризм.
Гринатом – ИТ-компания в структуре Росатом с фокусом на разработке инновационных решений для современных бизнес-процессов в атомной отрасли и за ее пределами. Мы развиваем цифровую экосистему Росатома, создаем свое ПО и обеспечиваем атомную отрасль современными ИТ-решениями, услугами и сервисами.
«Нетология» — российская компания и образовательная онлайн-платформа, одна из ведущих российских компаний онлайн-образования.
Команда Тинькофф — это разработчики, тестировщики, SRE-инженеры, архитекторы, аналитики, продакт-менеджеры, дизайнеры и другие специалисты. Вместе они создают финтех-продукты, которыми пользуются более 38 миллионов клиентов. Тинькофф развивает IT-индустрию, поддерживает комьюнити и делится экспертизой.
Garpix занимается созданием веб-сайтов и мобильных приложений, разработкой сложных информационных систем для бизнеса и госсектора, а также развитием своих собственных продуктов Garpix Load System, Garpix 3D Scan и Garpix Storage для оптимизации процессов складской логистики.
На Авито каждый может найти что-то свое среди миллионов частных объявлений и предложений компаний. У нас десятки тысяч rps к бэкенду, терабайты картинок в хранилище и мощная система автоматизированной модерации на базе машинного обучения. Каждый месяц сервисом пользуется треть населения России.
Делают IТ для ритейла реального времени. IТ-продукты компании автоматизируют разные этапы цепочки создания ценности для клиента доставки: закупки, логистику, работу дарксторов, сборку и доставку заказа до двери, управление промокампаниями и остальные этапы большого процесса. Используют интеллектуальные системы прогнозирования, а все этапы выполнения заказа автоматизируют роботическими системами. Их IТ-решения помогают создавать один из самых быстрорастущих бизнесов в стране: в 2020 году их IТ-продукты помогали доставлять 1.6 миллиона заказов в месяц в 4 городах России, сейчас — более 10 миллионов заказов в месяц в более чем 60 городах.
YADRO известна как разработчик и производитель всего, что можно увидеть в серверной и ЦОД: систем хранения данных, серверов, коммутаторов. С недавних пор компания также создает телеком-оборудование операторского класса. Go-разработчики заняты как в развитии СХД, так и в телеком-направлении.
Raft AI Labs — это подразделение компании Raft, специализирующееся на разработке и интеграции решений с использованием новейших AI-технологий. С помощью передовых технологий и инновационных подходов они преобразуют и оптимизируют бизнес-процессы, повышая их производительность и эффективность.
Создают цифровой банк с лучшим пользовательским опытом, персонализацией продуктов и быстрым внедрением изменений. У них все быстро и просто: принимайте решения сами и смотрите, как на ваших глазах строчки кода превращаются в реальную пользу для клиентов.
Делают IТ для ритейла реального времени. IТ-продукты компании автоматизируют разные этапы цепочки создания ценности для клиента доставки: закупки, логистику, работу дарксторов, сборку и доставку заказа до двери, управление промокампаниями и остальные этапы большого процесса. Используют интеллектуальные системы прогнозирования, а все этапы выполнения заказа автоматизируют роботическими системами. Их IТ-решения помогают создавать один из самых быстрорастущих бизнесов в стране: в 2020 году их IТ-продукты помогали доставлять 1.6 миллиона заказов в месяц в 4 городах России, сейчас — более 10 миллионов заказов в месяц в более чем 60 городах.
VK — это более 200 технологичных проектов, больше 11 000 сотрудников и безграничные возможности проявить себя. Компания создает современные и быстрые интернет-сервисы, доступные каждому.
SberDevices — дочерняя компания Сбера, которая производит «умные» устройства. Это B2B- и B2C-девайсы для экосистемы с применением речевых технологий и виртуальным ассистентом на борту.
Postgres Professional — разработчик Postgres Pro, самой популярной российской системы управления базами данных. В команде Postgres Professional — 70% российских разработчиков PostgreSQL. Среди заказчиков Postgres Pro — крупнейшие российские компании из списка РБК-500, а также объекты КИИ.
Garage Eight — международная продуктовая IT-компания. Умеют быстро и гибко адаптироваться к любым вызовам и ценят свободу своей команды.
YCLIENTS — лидер среди SaaS-решений для автоматизации бизнеса в сфере услуг и онлайн-записи. Предоставляют мощную облачную ERP экосистему.
SberDevices — IT-компания полного цикла в экосистеме Сбера, R&D-центр экспертизы в области искусственного интеллекта: речевые технологии, понимание естественного языка, компьютерное зрение, лицевая и голосовая биометрия. Производит умные устройства — от лампочек до телевизоров. В портфолио SberDevices — ruGPT-3, ruDall-E, RuSBERT и другие масштабные ML-проекты, высоконагруженные системы и технологии обработки Big Data.
Evocargo - логистический сервис на базе беспилотных грузовиков
