Как мы сделали высокоскоростной RPC с помощью RDMA для собственной СХД

Базы данных и системы хранения

Тезисы

Software-Defined Storage (SDS) - про передачу больших объемов данных по сети, нужно делать это надежно и быстро. Стек TCP/IP накладывает значительные
вычислительные ограничения на производительность решения даже в 100GbE сети. Возможная альтернатива - Remote Direct Memory Access (RDMA) протокол RDMA
over Converged Ethernet (RoCE) v2, использующий UDP/IPv4 или UDP/IPv6 стек в обычной сети Ethernet.
Расскажу, почему и как мы в компании Cloud.ru реализовали и запускали RoCE v2 RDMA транспорт для SDS собственной разработки:
1. недостатки стандартного сетевого стека Linux применительно к SDS, как мотивация внедрения RDMA;
2. наивная архитектура транспорта RDMA для передачи потока данных;
3. эффект от внедрения нового протокола;
4. дальнейшее развитие.