Масштабируемость, учет и ограничение ресурсов на массовом виртуальном хостинге Основная секция
Доклад принят в Программу конференции
Гринатом – ИТ-компания в структуре Росатом с фокусом на разработке инновационных решений для современных бизнес-процессов в атомной отрасли и за ее пределами. Мы развиваем цифровую экосистему Росатома, создаем свое ПО и обеспечиваем атомную отрасль современными ИТ-решениями, услугами и сервисами.
Тезисы
В докладе рассмотрены проблемы масштабируемости компонентов составляющих программный комплекс виртуального хостинга, таких как операционная система FreeBSD, http-сервер apache, http-акселератор nginx, сервер БД MySQL. На конкретных примерах показанно, что разработчики большинства этих компонентов не подозревают об их использовании на виртуальном хостинге.
Приводится краткий анализ существующих проблем масштабируемости компонентов и оценки возможных путей их решения, приведены примеры результатов, которых удалось достигнуть при помощи конкретных модификаций программного обеспечения.
Рассмотрена проблема учета и ограничения потребляемых ресурсов для конкретного пользователя. Перечислены существующие для этого штатные средства. Описаны применяемые собственные модификации ядра и http-сервера. Предлагается алгоритм для модификации планировщика ядра, который позволит должным образом ограничивать группы процессов. Демонстрируется работа реализованной системы учета потребляемых ресурсов в MySQL.
Также в докладе описана практика борьбы с мощными распределенными сетевыми атаками. Определены рамки в которых использование технических средств для борьбы с распределенными сетевыми атаками еще целесообразно, но за пределами которых необходимо использование нетехнических методов. Анализ наиболее эффективных технических и нетехнических методов борьбы. Основные выводы и рекомендации.
Другие доклады секции Основная секция
Garpix занимается созданием веб-сайтов и мобильных приложений, разработкой сложных информационных систем для бизнеса и госсектора, а также развитием своих собственных продуктов Garpix Load System, Garpix 3D Scan и Garpix Storage для оптимизации процессов складской логистики.
Мы - разработчик Proto Observability Platform - первой российской full stack observability платформы, и сервис-провайдер c более 10 лет опытом выполнения проектов по цифровой трансформации, кибербезопасности, облачным вычислениям, разработке программных продуктов на основе стека современных технологий.
SberDevices — дочерняя компания Сбера, которая производит «умные» устройства. Это B2B- и B2C-девайсы для экосистемы с применением речевых технологий и виртуальным ассистентом на борту.
SberDevices — это компания полного цикла. Мы создаем идеи, самостоятельно разрабатываем продукты, занимаемся прототипированием, конструированием, придумываем дизайн, программные решения, контролируем качество на фабриках и создаем инструменты для аппаратного тестирования. Перед SberDevices стоит амбициозная задача: сделать новейшие технологии максимально доступными в повседневной жизни, помочь им раскрыться и практически, и коммерчески.
ВКонтакте — крупнейшая социальная сеть в России и странах СНГ. Мы ставим перед собой масштабные вызовы и делаем технологии доступными для каждого пользователя. ВКонтакте помогает решать любые повседневные задачи — и даже больше!
Гринатом – ИТ-компания в структуре Росатом с фокусом на разработке инновационных решений для современных бизнес-процессов в атомной отрасли и за ее пределами. Мы развиваем цифровую экосистему Росатома, создаем свое ПО и обеспечиваем атомную отрасль современными ИТ-решениями, услугами и сервисами.
Делают IТ для ритейла реального времени. IТ-продукты компании автоматизируют разные этапы цепочки создания ценности для клиента доставки: закупки, логистику, работу дарксторов, сборку и доставку заказа до двери, управление промокампаниями и остальные этапы большого процесса. Используют интеллектуальные системы прогнозирования, а все этапы выполнения заказа автоматизируют роботическими системами. Их IТ-решения помогают создавать один из самых быстрорастущих бизнесов в стране: в 2020 году их IТ-продукты помогали доставлять 1.6 миллиона заказов в месяц в 4 городах России, сейчас — более 10 миллионов заказов в месяц в более чем 60 городах.
«Рексофт» — одна из ведущих компаний по разработке программного обеспечения и информационных систем, обладающая значительным опытом по созданию проектов для таких сфер бизнеса, как телекоммуникации и мобильная связь, банки и финансы, IТ, медиа, гостиничный бизнес и туризм.
Команда Тинькофф — это разработчики, тестировщики, SRE-инженеры, архитекторы, аналитики, продакт-менеджеры, дизайнеры и другие специалисты. Вместе они создают финтех-продукты, которыми пользуются более 38 миллионов клиентов. Тинькофф развивает IT-индустрию, поддерживает комьюнити и делится экспертизой.
VK — это более 200 технологичных проектов, больше 11 000 сотрудников и безграничные возможности проявить себя. Компания создает современные и быстрые интернет-сервисы, доступные каждому.
Почтатех — дочерняя IТ-компания Почты России, созданная в 2016 году. Через их сервисы проходят петабайты данных, а в портфолио — цифровые продукты, которыми пользуются миллионы людей по всей стране. Портал и приложение Почты, логистические системы, софт для отделений — это лишь часть того, что они разрабатывают и поддерживают.
Raft AI Labs — это подразделение компании Raft, специализирующееся на разработке и интеграции решений с использованием новейших AI-технологий. С помощью передовых технологий и инновационных подходов они преобразуют и оптимизируют бизнес-процессы, повышая их производительность и эффективность.
«Рексофт» — одна из ведущих компаний по разработке программного обеспечения и информационных систем, обладающая значительным опытом по созданию проектов для таких сфер бизнеса, как телекоммуникации и мобильная связь, банки и финансы, IТ, медиа, гостиничный бизнес и туризм.
IT-компания и основной цифровой партнер торговых сетей и бизнесов X5 Group. Команда из более 3500 специалистов разрабатывает решения, которые помогают 325 тысячам сотрудников группы работать с максимальным технологическим комфортом, а миллионам покупателей быстро и удобно покупать свежие продукты.
SberDevices — это компания полного цикла. Мы создаем идеи, самостоятельно разрабатываем продукты, занимаемся прототипированием, конструированием, придумываем дизайн, программные решения, контролируем качество на фабриках и создаем инструменты для аппаратного тестирования. Перед SberDevices стоит амбициозная задача: сделать новейшие технологии максимально доступными в повседневной жизни, помочь им раскрыться и практически, и коммерчески.
VK — это более 200 технологичных проектов, больше 11 000 сотрудников и безграничные возможности проявить себя. Компания создает современные и быстрые интернет-сервисы, доступные каждому.
YADRO известна как разработчик и производитель всего, что можно увидеть в серверной и ЦОД: систем хранения данных, серверов, коммутаторов. С недавних пор компания также создает телеком-оборудование операторского класса. Go-разработчики заняты как в развитии СХД, так и в телеком-направлении.
Evocargo - логистический сервис на базе беспилотных грузовиков
«Сфера» — универсальная экосистема продуктов для производства технологических решений, которая включает в себя более 40 инструментов для управления разработкой, тестированием, эксплуатацией программного обеспечения, а также инженерных инструментов для работы с исходным кодом и инструментами мониторинга рабочих станций и анализа бизнес-процессов.
YCLIENTS — лидер среди SaaS-решений для автоматизации бизнеса в сфере услуг и онлайн-записи. Предоставляют мощную облачную ERP экосистему.
Экосистема для бизнеса.
Raft AI Labs — это подразделение компании Raft, специализирующееся на разработке и интеграции решений с использованием новейших AI-технологий. С помощью передовых технологий и инновационных подходов они преобразуют и оптимизируют бизнес-процессы, повышая их производительность и эффективность.
SberDevices — IT-компания полного цикла в экосистеме Сбера, R&D-центр экспертизы в области искусственного интеллекта: речевые технологии, понимание естественного языка, компьютерное зрение, лицевая и голосовая биометрия. Производит умные устройства — от лампочек до телевизоров. В портфолио SberDevices — ruGPT-3, ruDall-E, RuSBERT и другие масштабные ML-проекты, высоконагруженные системы и технологии обработки Big Data.
Яндекс — технологическая компания, которая создает инновационные продукты на основе машинного обучения и нейронных сетей. Команда талантливых математиков и программистов развивает самую популярную в России поисковую систему и более 85 пользовательских сервисов, которые помогают людям в повседневных заботах.
«Нетология» — российская компания и образовательная онлайн-платформа, одна из ведущих российских компаний онлайн-образования.
Garage Eight — международная продуктовая IT-компания. Умеют быстро и гибко адаптироваться к любым вызовам и ценят свободу своей команды.
Яндекс — технологическая компания, которая создает инновационные продукты на основе машинного обучения и нейронных сетей. Команда талантливых математиков и программистов развивает самую популярную в России поисковую систему и более 85 пользовательских сервисов, которые помогают людям в повседневных заботах.
Создают цифровой банк с лучшим пользовательским опытом, персонализацией продуктов и быстрым внедрением изменений. У них все быстро и просто: принимайте решения сами и смотрите, как на ваших глазах строчки кода превращаются в реальную пользу для клиентов.
ВКонтакте — крупнейшая социальная сеть в России и странах СНГ. Мы ставим перед собой масштабные вызовы и делаем технологии доступными для каждого пользователя. ВКонтакте помогает решать любые повседневные задачи — и даже больше!
Практические методики нагрузочного тестирования, опыт тестирования производительности веб-приложений
Гринатом – ИТ-компания в структуре Росатом с фокусом на разработке инновационных решений для современных бизнес-процессов в атомной отрасли и за ее пределами. Мы развиваем цифровую экосистему Росатома, создаем свое ПО и обеспечиваем атомную отрасль современными ИТ-решениями, услугами и сервисами.
Raft AI Labs — это подразделение компании Raft, специализирующееся на разработке и интеграции решений с использованием новейших AI-технологий. С помощью передовых технологий и инновационных подходов они преобразуют и оптимизируют бизнес-процессы, повышая их производительность и эффективность.
Создают цифровой банк с лучшим пользовательским опытом, персонализацией продуктов и быстрым внедрением изменений. У них все быстро и просто: принимайте решения сами и смотрите, как на ваших глазах строчки кода превращаются в реальную пользу для клиентов.
YCLIENTS — лидер среди SaaS-решений для автоматизации бизнеса в сфере услуг и онлайн-записи. Предоставляют мощную облачную ERP экосистему.
Яндекс — технологическая компания, которая создаёт инновационные продукты на основе машинного обучения и нейронных сетей. Команда талантливых математиков и программистов развивает самую популярную в России поисковую систему и более 85 пользовательских сервисов, которые помогают людям в повседневных заботах.
Postgres Professional — разработчик Postgres Pro, самой популярной российской системы управления базами данных. В команде Postgres Professional — 70% российских разработчиков PostgreSQL. Среди заказчиков Postgres Pro — крупнейшие российские компании из списка РБК-500, а также объекты КИИ.
VK — это более 200 технологичных проектов, свыше 11 000 сотрудников и более 20 лет опыта создания высоконагруженных интернет-сервисов. ВКонтакте, Одноклассники, VK Cloud, Дзен, Маруся, VK Play — это лишь часть продуктов VK, которыми ежедневно пользуются миллионы людей по всей стране.
На Авито каждый может найти что-то свое среди миллионов частных объявлений и предложений компаний. У нас десятки тысяч rps к бэкенду, терабайты картинок в хранилище и мощная система автоматизированной модерации на базе машинного обучения. Каждый месяц сервисом пользуется треть населения России.
Делают IТ для ритейла реального времени. IТ-продукты компании автоматизируют разные этапы цепочки создания ценности для клиента доставки: закупки, логистику, работу дарксторов, сборку и доставку заказа до двери, управление промокампаниями и остальные этапы большого процесса. Используют интеллектуальные системы прогнозирования, а все этапы выполнения заказа автоматизируют роботическими системами. Их IТ-решения помогают создавать один из самых быстрорастущих бизнесов в стране: в 2020 году их IТ-продукты помогали доставлять 1.6 миллиона заказов в месяц в 4 городах России, сейчас — более 10 миллионов заказов в месяц в более чем 60 городах.
