这是一份有“细节”的测试报告
这是来自数据中心客户的真实需求
一份“干货满满”的测试报告
好啦，让我们用测试数据来证明~
1、测试目标在同样的测试环境，有以下两种场景时：
▣ “Overlay功能运行在服务器”
▣ “Overlay功能卸载至交换机”
相同VXLAN和不同VXLAN的VM间通信的过程中，服务器PPS、虚机的发包速度、发送时延等服务器处理性能的变化情况。
*该测试场景中Overlay的功能仅包括VXLAN的封装和去封装(即VTEP功能)。
2、测试方案的物理网络拓扑
图1：物理网络拓扑
部署过程中所涉及到的设备、接口及管理网口的IP地址如下表：
表1：设备IP地址列表
3、硬件与软件环境部署环境中涉及到的硬件和软件如下：
表2：硬件环境
表3：软件环境
4、测试思路和测试结果
相同VXLAN的VM间通信
Overlay功能卸载前后的服务器处理性能对比
(☟点击图片查看大图~)
图2：相同VXLAN的VM间通信组网图
▌测试思路：
❶ 在Server1和Server2中分别创建2个虚拟机，它们都属于同一个VXLAN，为每一个虚拟机绑定一个核。❷ Server1中的两个虚拟机用内核自带的pktgen模块进行发包，Server2的2个虚拟机进行收包。
❸ 将Overlay运行在服务器内：
a、通过pktgen造10000个不同源MAC地址的包;
b、接着设置发包大小，分小包和大包两个测试阶段;
c、然后设置发包数量为1000万个;
d、最后让Server1中的VM-11、VM-12分别向Server2中VM-21、VM-22单向发包;
e、通过调整发包间隔，在刚好不丢包的状态下，记录发送包的总时长;
f、计算平均PPS。
❹ 将Overlay功能卸载至可编程交换机中，服务器内仅运行轻量级的二层网络功能：
a、测试思路与第❸步相同。
❺ 对比“Overlay功能运行在服务器内”和“Overlay功能卸载至交换机中”的两种场景下的实验结果，得出结论。
▌测试结果：
Overlay功能运行在服务器内
Overlay功能卸载至可编程交换机中
▌结果分析：发送包长为64字节小包或1024字节大包，Overlay功能卸载后与卸载前的服务器处理性能在发包速度、延时、PPS、OVS对服务器CPU的占用率等方面的对比如下表：
注：百分比 = |卸载前 - 卸载后| / 卸载前
从结果分析表格中可以得出：
✤ 相同VXLAN的VM间通信，发送数据包的包长为64字节或1024字节时，在发送数据包的总数量一定，且保证不丢包的情况下，Overlay功能从服务器中卸载至交换机上能从多方面提升服务器处理性能：
1、虚拟机的发包间隔缩短了40%;
2、从发端到收端的整个通信过程用时缩短了40%;
3、服务器网卡上的PPS提升了65%-70%。
✤ 在未对OVS进行资源限制时，OVS对计算服务器CPU的占用率在Overlay功能卸载前后基本保持不变。
不同VXLAN的VM间通信
Overlay功能卸载前后的服务器处理性能对比
(☟点击图片查看大图~)、
图3：不同VXLAN的VM间通信组网图
▌测试思路：
❶ 在Server1和Server2中分别创建2个虚拟机，VM-11和VM-12属于一个VXLAN，VM-12和VM-22属于一个VXLAN，为每一个虚拟机绑定一个核。
❷ Server1中的2个虚拟机用内核自带的pktgen模块进行发包，Server2的2个虚拟机进行收包。
❸ 将Overlay运行在服务器内：
a、通过pktgen造10000个不同源MAC地址的包;
b、接着设置发包大小，分小包和大包两个测试阶段;
c、然后设置发包数量为1000万个;
d、最后让Server1中的VM-11、VM-12分别向Server2中VM-21、VM-22单向发包;
e、通过调整发包间隔，在刚好不丢包的状态下，记录发送包的总时长;
f、计算平均PPS。
❹ 将Overlay功能卸载至可编程交换机中，服务器内仅运行轻量级的二层网络功能：
a、测试思路与第❸步相同。
❺ 对比“Overlay功能运行在服务器内”和“Overlay功能卸载至交换机中”的两种场景下的实验结果，得出结论。
▌测试结果：
Overlay功能运行在服务器内
Overlay功能卸载至可编程交换机中
▌结果分析：
发送包长为64字节小包或1024字节大包时，Overlay功能卸载后与卸载前的服务器处理性能在发包速度、延时、PPS、OVS对服务器CPU的占用率等方面的对比如下表：
注：百分比 = |卸载前 - 卸载后| / 卸载前
从结果分析表格中可以得出：
✦ 不同VXLAN的VM间通信，发送数据包的包长为64字节或者1024字节时，在发送数据包的总数量一定，且保证不丢包的情况下，Overlay功能从服务器中卸载至交换机上能从多方面提升服务器处理性能：
1、虚拟机的发包间隔缩短了40%;
2、从发端到收端的整个通信过程用时缩短了38%;
3、服务器网卡上的PPS提升了60%。
✦ 在未对OVS进行资源限制时，OVS对计算服务器CPU的占用率在Overlay功能卸载前后基本保持不变。
5、总结
在数据中心中，将运行在服务器内的Overlay功能卸载至交换机上，能为服务器处理性能带来多方面的同步提升：首先 ，有效缩短业务的发包间隔，提升业务流发送速度，降低报文发送时延;其次 ，有效降低业务端到端的整个通信过程的总时延，缩短业务的响应时间，进而提升用户体验;最后 ，有效提升服务器上网卡上的PPS值，大幅增加服务器网卡的吞吐量，提升数据中心网络性能。
需要注意的是：
Overlay功能无论是运行在服务器内还是卸载至交换机上，因为服务器的CPU处理速度存在瓶颈，如果VM的发包速度过快，会出现丢包。
当OVS中的转发规则过多，匹配时间就会较长，在刚开始发包的几秒内会出现丢包现象。
