问设置简单的无限块存储(SRP或iSER)

EN

坦白地说，我走了一条简单的路线，愉快地使用了IP over IB上的iSCSI，它工作起来很容易，并且执行得很好：

Infiniband IP安装超高速引物.

首先..。

• 安装opensm，infiniband-对角线，rds-工具，sdpnetstat，srptools，完善测试(用于基准测试)
• 加载IB驱动模块、ib_umad、ib_ipoib
• 现在，您需要配置一个新的网络接口。

性能设置：

• 连接模式，将MTU设置为65520。
• 数据报模式，将MTU设置为2044。
• 数据报性能：~5GB/S
• 连接模式性能：~6.3GB/S

YMMV与IB控制器模型，驱动等。

IP设置：

net.ipv4.tcp_timestamps=0
net.ipv4.tcp_sack=0
net.core.netdev_max_backlog=250000
net.core.rmem_max=16777216
net.core.wmem_max=16777216
net.core.rmem_default=16777216
net.core.wmem_default=16777216
net.core.optmem_max=16777216
net.ipv4.tcp_mem="16777216 16777216 16777216"
net.ipv4.tcp_rmem="4096 87380 16777216"
net.ipv4.tcp_wmem="4096 65536 16777216"

一些文件：

http://support.systemfabricworks.com/lxr/#ofed+OFED-1.5/ofed-docs-1.5/ipoib_发布_notes.txt

http://www.mjmwired.net/kernel/Documentation/infiniband/ipoib.txt

iperf，4个线程：

[  3] local 192.168.1.2 port 50585 connected with 192.168.1.3 port 5003
[ ID] Interval       Transfer     Bandwidth
[  3]  0.0-10.0 sec  2.75 GBytes  2.36 Gbits/sec
[ ID] Interval       Transfer     Bandwidth
[  3]  0.0-10.0 sec  2.79 GBytes  2.40 Gbits/sec
[ ID] Interval       Transfer     Bandwidth
[  3]  0.0-10.0 sec  3.31 GBytes  2.84 Gbits/sec
[ ID] Interval       Transfer     Bandwidth
[  3]  0.0-10.0 sec  3.51 GBytes  3.02 Gbits/sec

总总带宽1.3GB/S，绝对优于10 GigE。

稳定是不同的。Mellanox在销售硬件时主要考虑性能。当他们收购伏尔泰时，由于他们的IB网络网关，他们正在推动iSER。

我们在ProfitBricks使用iSER和Solaris 11作为IaaS 2.0云的目标。但是，当我们遇到主要的ZFS性能以及IPoIB和open稳定性问题时，我们转而使用带有SCST和SRP的Linux存储。我们帮助改进linux邮件列表上的这项技术，并使用我们自己的ib_srp修补程序。对我们来说，稳定需要简单。因此，我们将进行SRP，因为我们有InfiniBand。RDMA是InfiniBand的本机，SRP是RDMA专用的。

今年，我就这个主题做了一次关于LinuxTag的介绍: InfiniBand/RDMA for Storage - SRP vs. http://www.slideshare.net/SebastianRiemer/infini-band-rdmaforstoragesrpvsiser-21791250

它还展示了如何建立SRP连接。

Linux的iSER实现可以通过tgt项目获得，而Linux的SRP实现可以通过SCST项目获得。关于Windows支持:此时，Windows没有可用的iSER启动驱动程序。但是winOFED软件包中有SRP启动器驱动程序(请参阅openfabrics.org网站)。