2017年12月2日星期六

Openstack中的网络QoS功能

这个功能实现了CPU,disk IO和network IO的限流功能。 不过由于以下bug,真正可以正常工作的版本必须是2013.1.3以上版本。
另外, wiki上的命令中key是不准确的,key的值可以参考以下源码:

这些限流功能其实是libvirt本身就提供的,openstack在设置flavor时,可以想这些限流信息设定好。当启动虚机时,写入虚机的/var/lib/nova/instance/XXX/libvirt.xml中就可以了。
我大致实验了一下发现效果还是比较明显的,实验步骤如下:
1. 创建flavor。
2. 使用以下命令设置网络qos:
nova flavor-key  matt_test set quota:vif_outbound_average=1024  ß outbound limit是 1024 kbyte
nova flavor-key  matt_test set quota:vif_inbound_average=2048     ß inbound limit 是 2048 kbyte
3. 使用这个flavor启动instance,测试上下行速度, 我使用的是netperf+iptraf。发现qos功能正常。
以下截图是使用scp拷贝文件,可以很明显的看出效果:
无QoS,下行速度80MByte/s:
有QoS,下行速度2MByte/s左右:

可以看到libvirt.xml中添加了qos的信息:
    <interface type="bridge">
     <mac address="fa:16:3e:40:85:d1"/>
     <model type="virtio"/>
     <source bridge="br101"/>
     <filterref filter="nova-instance-instance-0000006c-fa163e4085d1"/>
     <bandwidth>
       <inbound average="2048"/>
       <outbound average="1024"/>
     </bandwidth>
</interface>

在host主机中使用tc命令发现在vnet0上设置了qos规则,看来libvirt也是使用host主机的TC来实现qos功能的:
# tc -s -d qdisc
qdisc htb 1: dev vnet0root refcnt 2 r2q 10 default 1 direct_packets_stat 0 ver3.17            ß Outbound QoS
 Sent 310426919bytes 286434 pkt (dropped 0, overlimits 106276 requeues 0)
 rate 0bit 0ppsbacklog 0b 0p requeues 0
qdisc ingress ffff: devvnet0 parent ffff:fff1 ----------------                                  ß Inbound QoS
Sent 191950889 bytes80382 pkt (dropped 806, overlimits 0 requeues 0)
 rate 0bit 0ppsbacklog 0b 0p requeues 0

# tc class show devvnet0
class htb 1:1 root prio0 rate 16384Kbit ceil 16384Kbit burst 1597b cburst1597b        
地点: 中国四川省成都市