RDMA

RDMAのメモ帳

最近ちょくちょく聞くようになったRDMAについて、動く使えるOSとかNICとかHCAとか。
どんなものかというと、リモート先のメモリにCPUを介さず読み書き可能な規格。
元々はHPCとかで使われてたけど、最近はストレージで使われてたり。
うちの環境でも、使用用途としてはストレージ回りで使ってる感じです。
使用可能なインターフェイスとしては、IntelのOmniPath、MellanoxのInfiniband、あとはEthernet。
手持ちでテスト可能な環境は、InfinibandとEthernetなので、OmniPathは除外で。
Ethernetで使えるのは、規格というかインターフェイスというかはRoCEとかiWARPになる。
InfinibandだとそのままRDMA。元々、Infinibandの規格にはRDMA無かったとか。

 RDMA使ったプロトコル

SRP

SCSI RDMA Protocol のこと、元々はInfinibandにべったりなプロトコル。
最近は、RoCE使えば、Ethernetでもいけるみたい。
ただ、iSCSIのように認証なかったりするので使い所が色々と微妙。

iSER

iSCSI Extensions for RDMA のこと、iSCSIが入ってるようにiSCSIのデータ転送部分を
RDMAでやっちゃうプロトコル。InfinibandでもEthernetでも使える。

• nix系でサポートされてる。Windows系は未サポート。

SMB Direct

SMB 3以降でサポートされてる。SMBのデータ通信をRDMAでやっちゃうプロトコル。
今のところサポートしてるOSは、Windows Server 2012以降のサーバOSと
Windows 10 Enterpriseくらい。Sambaでは現在未実装。

NFS over RDMA

NFSのデータ転送部分をRDMA行うプロトコル。
実装されてるのは、Linux系だけしか自分は知らない。

SDP

Sockets Direct Protocol のこと、通常のSocketをラップしてRDMAでデータ通信を
行うプロトコル。メンテナンスはされてないっぽい。

 RDMAが使用可能なOS

(確かAIXとかでも使用可能な筈だけど確認できてないので)

 RDMA対応NIC,HCA