使用说明
所有文档
menu

云服务器 BCC

使用说明

创建RDMA网络增强型实例

参考创建实例导航创建RDMA网络增强型实例,RDMA网络增强型实例可参考实例规格

创建并挂载弹性RDMA网卡

参考创建弹性网卡,需要注意选择RDMA型的网卡类型以创建ERI,如下图。同时在安全组中不可限制UDP 4791端口。 image.png

参考挂载弹性网卡的使用说明来挂载ERI到实例,弹性RDMA网卡支持挂载RDMA网络增强型实例。

配置弹性RDMA网卡

参考配置弹性网卡来配置IP地址和路由。

测试弹性RDMA网卡

测试2个RDMA网络增强型实例之间的ERI性能

  1. 安装OFED驱动

访问OFED下载链接下载系统环境对应的OFED版本,建议您下载LTS 5.4-3.1.0版本。 如您使用CentOS7u8或者CentOS 8u4,则需要额外下载依赖包

CentOS 7u8:

Plain Text
1yum install createrepo
2yum install elfutils-libelf-devel python-devel redhat-rpm-config rpm-build libtool

CentOS 8u4:

Plain Text
1yum install createrepo
2yum install kernel-rpm-macros python36 elfutils-libelf-devel python36-devel gdb-headless rpm-build libtool gcc

解压驱动安装包后,在安装目录执行以下命令

Plain Text
1./mlnxofedinstall --without-fw-update  --add-kernel-support --skip-distro-check
  1. 查看网卡设备信息

通过show_gids查看网卡的GID表,在VER为v2的选项中,查找目标ERI设备及IP地址对应的INDEX。

  1. perftest测试ERI的RDMA带宽

在第一个实例中通过ib_write_bw -d mlx5_1 -x 3 -q 16 --report_gbits 作为server端

在第二个实例中通过ib_write_bw -d mlx5_1 -x 3 -q 16 --report_gbits 192.168.0.3 作为client端,然后可观察到带宽测试结果。

参数解释:

-d: 填写步骤2中DEV对应字段

-x:填写步骤2中INDEX字段

-Client端需要填写server端ERI的IPV4地址

监控弹性RDMA网卡

支持针对已绑定RDMA的ERI粒度的监控,支持以下指标:

指标名
MetricName
端口接收数据总数 RdmaPortRcvData
端口传输数据总数 RdmaPortXmitData
端口接收包总和 RdmaPortRcvPackets
端口传输包总和 RdmaPortXmitPackets
端口链接关闭次数 RdmaPortLinkDowned
端口被丢弃出站数据包总数(由于端口关闭或拥塞) RdmaPortXmitDiscards
上一篇
弹性RDMA网卡概述
下一篇
变更VPC