Мнение Программного комитета о докладе
Доклад принят в программу конференции
Доклад посвящен продуктам, разработанным в SberData, для прозрачного федеративного доступа пользователей к данным в экосистеме Apache Hadoop. Обсудим основные принципы работы компонентов Apache Hadoop: HDFS, Hive и Sentry/Ranger. Расскажу про особенности проксирования данных, метаданных и привилегий.
Будут затронуты основные проблемы разработки и проектирования распределенных систем, расскажу, на какие проблемы стоит обратить внимание, об аспектах безопасности и нюансах использования Kerberos. Обсудим форматы хранения данных в HDFS, в частности, формат Apache Parquet.
Коснемся особенностей работы с open source-библиотеками Apache Hadoop, их доработки и реализации функционала, который нигде не описан, и непонятно, с чего начинать.
В финале обсудим нюансы эксплуатации ПО подобного класса: проведение нагрузочного тестирования, взаимодействие со смежными системами, мониторинг, настройка health check'ов, управление конфигурацией и развертыванием.
Занимается разработкой продуктов на Java с 2005 года.
Сбер
BigData и машинное обучение
Профессиональная конференция разработчиков высоконагруженных систем HighLoad++ Foundation
Варианты участия
Конференция
Стоимость конференции постоянно растёт — чем ближе к мероприятию, тем дороже.
Текущая стоимость билета — рублей.
Забронировать билетыОнлайн-участие
Все потоки с докладами (но не потоки с митапами) будут транслироваться нами онлайн.
Вы можете приобрети персональную трансляцию стоимостью рублей, которая даёт возможность смотреть доклады с одного компьютера.
Онлайн участиеКорпоративное участие
Для заказа от 10-и билетов на очное или онлайн-участие, свяжитесь с нами по partners@ontico.ru.
Передумали покупать?
Расскажите, почему, и мы подарим вам доступ к лучшим докладам прошлой конференции Saint HighLoad++ 2021:
Спасибо!
Вот ссылка на плейлист Saint HighLoad++ 2021 в YouTube
Видео, доступные к покупке
Видео FrontendConf 2023
2 октября 2023 — 3 ноября 2023
32000 ₽
Видео HighLoad++ 2023
27 и 28 ноября 2023
32000 ₽
Видео TeamLead Conf++ 2023
30 ноября 2023 и 1 декабря 2023
32000 ₽
Видео DevOpsConf 2024
4 и 5 марта 2024
37500 ₽
Видео Saint HighLoad++ 2024
24 и 25 июня 2024
39500 ₽
Видео Saint TeamLead Conf 2024
27 и 28 июня 2024
37500 ₽
Видео AiConf 2024
26 и 27 сентября 2024
37500 ₽
Видео FrontendConf 2024
30 сентября 2024 и 1 октября 2024
37500 ₽