neutron之Neutron和ONOS集成实践

admin

Neutron和ONOS社区动态
  e! U6 B: u7 `
1 F( L# K0 J! m' L8 }2 H+ N首先，我们可以从Neutron项目中的doc/source/policies/neutron-teams.rst文件看到，onos和neutron集成项目的相关开发者信息。其Master是一位来自华为印度班加罗尔地区的Vikram Choudhary，负责主导该项目的开发工作。
$ g, h# x* ]4 V( x+ U- r; k
; M, Y6 V1 K  p/ w' L$ SArea
Lieutenant
IRC nick
0 ^1 d% p- s" `+ Gnetworking-odl
# P  T4 a6 p) k' n3 AFlavio Fernandes
1 u# M3 ?& v% X& s' E) n4 X! i0 ^Flaviof
Kyle Mestery
5 `  P& g9 @1 xmestery
- g/ E. w8 n( lnetworking-onos
0 V( S2 A2 R  X" z7 t( xVikram Choudhary
vikram
' j, \* Q3 e$ b; B5 ^
是的，该项目的主导团队，正是来自于华为，当然也包括中国区的开发者们。 如下图所示，我们还能在review.openstack官网上，看到该项目（networking-onos）的全部Core Reviews。如下图1所示
% V- t) v' M2 M# {; a9 j

4 p  t7 F2 t; @: n# O% p! Q' R 首先，我们git clone最新的neutron项目代码，从doc/source/stadium/sub_projects.rst文件中，我们可以清晰的看到目前诸如odl、onos之类的sdn plugin在Neutron中的作用和角色定位。比如，odl的角色是在Neutron中担负ML2层、L3层、负载均衡和防火墙这四类资源操作和管理的实现。如下表所示。
" c* T6 D& N* N; O8 L. i% d1 g
Name
% Y7 q. K2 m7 d. IFunctionality
networking-onos_
ml2
% z* k! J" ^8 U3 M, B! @6 O* lnetworking-odl
ml2,l3,lb,fw

这里，值得我们注意的是，事实上，ONOS并不只是实现ML2层的资源，还包括了L3层等资源。应该是由于onos社区这方面的开发尚未结束或openstack社区对于这块文件未及时更新。

在Neutron中，诸如odl、onos之类的sdn plugin 均是以mechanism_drivers的方式，和ML2、L3等之类的网络服务集成，来提供各种功能。而每一个mechanism_drivers都需要实现type_drivers中的各种网络模型，比如我们常用的vlan、vxlan等。Setup.cfg代码选取如下：
# V" K% R) _' W: t; S$ L7 Z4 @
& n/ G3 W2 n* e+ m6 Rneutron.ml2.type_drivers =
4 @' t. ^, W4 t- }) o' ]/ U    flat = neutron.plugins.ml2.drivers.type_flat:FlatTypeDriver
/ }# g- l: D# x3 F' N    local = neutron.plugins.ml2.drivers.type_local:LocalTypeDriver
. b/ I# [1 d6 o# d    vlan = neutron.plugins.ml2.drivers.type_vlan:VlanTypeDriver
    geneve = neutron.plugins.ml2.drivers.type_geneve:GeneveTypeDriver
    gre = neutron.plugins.ml2.drivers.type_gre:GreTypeDriver
" u  d2 E% M1 U" v6 g" Zvxlan = neutron.plugins.ml2.drivers.type_vxlan:VxlanTypeDriver
neutron.ml2.mechanism_drivers =
    linuxbridge = neutron.plugins.ml2.drivers.linuxbridge.mech_driver.mech_linuxbridge:LinuxbridgeMechanismDriver
( F& b* @4 w0 q6 k
2.Neutron和ONOS集成实践
4 F; d0 O4 a: a/ P: f( x; V
: K. B& F, C* n我的实践环境，由VMware WorkStations 16搭建的2台VM，具体如下：

" X7 p) y& O8 h* i: WONOS平台
OpenStack平台
Ubuntu 18.04
CentOS 7.9
ONOS 1.3.0
Openstack Liberty（支持Kilo），由Rdo安装的All-in-one
10.0.0.29
10.0.0.19

9 P7 P0 I( H. ^9 r- x友情提示：关于ONOS和OpenStack环境的搭建，SDNLAB上已有丰富的资料，可参考。

在集成之前，请确保你的相关服务是正常运行中的。如下图
( p# G3 o+ n+ Q! k
! c+ ]- T; o9 \0 ^( \1 Y
1）安装networking-onos（OpenStack Controller Node）

# pip install networking-onos
2 g8 p4 Z! z9 |4 c7 t- b6 x
2）配置ml2_conf.ini文件（OpenStack Controller Node）
' B. O; A8 w7 F. T2 s
5 n$ r9 G7 k( M+ A# vim /etc/neutron/plugins/ml2/ml2_conf.ini
2 N/ _! a6 j: u8 z$ N" k/ r[ml2]
type_drivers = vxlan
+ Y1 r# T. W0 Utenant_network_types = vxlan
mechanism_drivers = onos_ml2
...
[ml2_type_vxlan]
0 ~+ i! `8 O) u& `/ J2 e2 c0 U5 e" dvni_ranges = 1001:2000
...
# I9 J" e- d: Y) E9 I5 G[secutirygroup]
enable_security_group = True
...
[onos]
  O4 J' ?0 s6 k9 surl_path = http://10.0.0.29:8181/onos/vtn      # IP请换成你自己的ONOS_IP
username = karaf
3 x( P( W" j. h! i* ~( o" Qpassword = karaf

( Q9 k( N& A2 c1 S' E/ B/ N) C3）更新配置文件（OpenStack Controller Node）
. ~) T/ b" k( J$ B* Z9 o5 D
. L/ Y) v: Q5 C5 S# neutron-db-manage --config-file /etc/neutron/neutron.conf --config-file /etc/neutron/plugins/ml2/ml2_conf.ini upgrade head
: W" P$ a+ V6 _5 j, X
4）重启Neutron服务（OpenStack Controller Node）
. J( ?: N7 H9 T" J
; G% i7 G  H" D% x; S( p# systemctl restart neutron-server.service

注意： 如果在配置ONOS driver和Neutron集成时，提示错误，请查看如下日志文件。 /var/log/neutron/server.log
2 G* U2 R. Z/ U" w
9 M' H" X; r5 p: L5）在ONOS命令行中安装所需要的功能
& Y8 Z6 j& D- ]0 a
onos> feature:install onos-ovsdatabase
onos> feature:install onos-app-vtnrsc
onos> feature:install onos-app-vtn
onos> feature:install onos-app-vtnweb
& d7 W& j# F+ r: a1 x& T" O
6）检查ONOS VTN 功能 浏览器中访问：http://10.0.0.29:8181/onos/vtn/subnets #请换成你自己的ONOS_IP 你会得到一个如下面一样的空的json输出 {"subnets":[]}
) e# {0 P/ y$ y! y; v( V& x

7）设置网桥连接（OpenStack Network/Compute Nodes） 如果你的OpenStack平台，既有计算节点，也有网络节点，请分别运行如下命令设置。

# ovs-vsctl set-manager tcp:10.0.0.29:6640      #请换成你自己的ONOS_IP</p>
2 [) M3 D, \1 b3 L" g使用ovs-vsctl show命令，检查设置情况。
# ovs-vsctl show
- h5 g) T: s: |2924ffa8-cad5-469c-a4c6-6785e79036ac
. m' b6 B  }7 |" u& a+ W' M    Manager "tcp:10.0.0.29:6640"
" f0 l% Q6 T8 R  @: G) a8 G
8）在Horizon 上，创建一个network和subnet。下图是我创建的一个结果。
5 B- V: L* `7 J/ s: J2 q

9）使用REST client检查REST。这里，我使用的是Google的Postman插件。 输入URL：http://10.0.0.29:8181/onos/vtn/subnets #请换成你自己的ONOS_IP 正常情况下，你应该得到如下输出
" `& u# x" h* r$ A. r
2 a) u+ G1 O- c' \( K9 p! p{
+ _9 m$ ]: d9 Y) r- m) }"subnets": [
{
4 @6 z; R- ~4 M6 [( c: g* l" e) ?"id": "6a3e9b3c-7993-4b85-a5b8-f225ff68a8d7",
$ s8 [/ T* x8 ^: K, a  I7 v"gateway_ip": "10.0.0.2",
"network_id": "e376be13-481b-481d-818b-aed4d9fce8a5",
0 s$ }0 t- ~* W) H5 m$ y" N# b+ q5 G. z4 |"name": "external_subnet",
"ip_version": "INET",
2 s# ^& n# w  s) z$ s2 L. W"cidr": "10.0.0.0/24",
% I, q# d5 Z6 Y"shared": true,
# y# r1 Y/ A1 v"enabled_dchp": false,
"tenant_id": "5e7d2d5df0534fb087aac1b6f7bf8ca4",
: j- J; C" K8 p# G8 a: o"ipv6_address_mode": null,
"ipv6_ra_mode": null,
' c) h# }8 R/ P; @& N* f! Y"allocation_pools": [
{
"start": "10.0.0.100",
"end": "10.0.0.150"
}
, }6 _7 h* U9 q; [& d: o6 K% [],
+ i# i4 b. s5 o  |  y"host_routes": [ ]
}
]
4 X7 ~' T/ M7 {: f( ?/ k}

10）在VXLAN模式下，创建一个可以ping通外网的虚拟机。
: i3 x& ?9 x; F0 u4 N
' z2 P4 V+ D3 [, B8 x" ^9 t$ S
11）使用REST Client，使用GET方法获取REST Port http://10.0.0.29:8181/onos/vtn/ports
% _; c, ~* V2 I! u9 r/ `- X* t
12）登录ONOS UI。Topology上查看link br-int to br-int；vm to br-int http://10.0.0.29:8181/onos/ui

1 w3 a4 C8 V4 ]/ Y8 w13）Flow验证 由于onos集成neutron，不支持br-tun隧道。因此，环境中的br-int充当了br-tun的功能和角色。如果，你的环境中既有计算、也有网络节点，请分别在网络和计算节点上查看Flow。 由于，我部署的是all-in-one平台，因此运行一次即可。
! b9 l1 R  q$ X
# ovs-ofctl dump-flows br-int #如果你指定的协议是openflow13，请添加参数 –O openflow13
NXST_FLOW reply (xid=0x4):
cookie=0x82a481adf93d8421, duration=747.216s, table=0, n_packets=0, n_bytes=0, idle_age=747, priority=10,icmp6,in_port=8,icmp_type=136 actions=resubmit(,24)
8 ~" j7 l/ Y: U! W, E/ ]cookie=0x82a481adf93d8421, duration=747.201s, table=0, n_packets=4, n_bytes=168, idle_age=424, priority=10,arp,in_port=8 actions=resubmit(,24)
cookie=0x82a481adf93d8421, duration=2635.490s, table=0, n_packets=372, n_bytes=40966, idle_age=424, priority=0 actions=NORMAL
; A+ d+ ?6 _6 F# }cookie=0x82a481adf93d8421, duration=2635.480s, table=23, n_packets=0, n_bytes=0, idle_age=2635, priority=0 actions=drop
1 s5 \, t  D; e. L' E5 n4 Ycookie=0x82a481adf93d8421, duration=747.226s, table=24, n_packets=0, n_bytes=0, idle_age=747, priority=2,icmp6,in_port=8,icmp_type=136,nd_target=fe80::f816:3eff:fec3:e7a3 actions=NORMAL
cookie=0x82a481adf93d8421, duration=747.209s, table=24, n_packets=4, n_bytes=168, idle_age=424, priority=2,arp,in_port=8,arp_spa=192.168.0.3 actions=NORMAL
cookie=0x82a481adf93d8421, duration=2635.469s, table=24, n_packets=0, n_bytes=0, idle_age=2635, priority=0 actions=drop

- w2 }9 F! T; u$ b3、目前已知的集成问题

1) 不支持br-tun onos-ovsdatabase (sudo ovs-vsctl set-manager tcp:ONOS_IP:6640)
+ F  C6 c( v, n6 m+ G8 p6 _
tunnel create using br-int
3 i/ R1 H3 m1 n* Rmanagement network
$ O# M" ]1 a+ T. a' R
不支持data network
2) Buffalo SW（个人理解是指物理的网络扩展）
' @" m/ D- h( f9 \0 Y3 Y5 o1 y) N
Buffalo SW is OpenWRT
6 g( V/ W4 m% r( [install OVS

& N+ K5 r! |6 q6 m7 ~# }1 \$ tBuffalo SW connect ONOS（该OpenFlow交换机是一个物理交换机）
sudo ovs-vsctl set-controller
" ]" a9 A- p2 ?+ y7 @- Q) d2 B
: I) w2 l% R# g) J$ r7 N