女主宣言
裸金属特性是一种将物理设备作为资源提供给租户的云计算服务&＃xff0c;租户通过该服务可申请、管理和配置相应的物理设备资源&＃xff0c;本文将介绍360Stack裸金属服务器的部署实践。
PS&＃xff1a;丰富的一线技术、多元化的表现形式&＃xff0c;尽在“360云计算”&＃xff0c;点关注哦&＃xff01;
1
裸金属介绍
裸金属特性是一种将物理设备作为资源提供给租户的云计算服务&＃xff0c;租户通过该服务可申请、管理和配置相应的物理设备资源。这种物理设备是未安装操作系统的服务器&＃xff0c;又称为裸金属服务器&＃xff0c;简称裸金属。
在Openstack中&＃xff0c;由Ironic这个组件来提供裸金属的部署和管理。Ironic需要与Keystone、Nova、Neutron、Cinder以及Swift进行交互&＃xff0c;像Nova创建虚拟机一样&＃xff0c;需要对应的认证服务、网络服务、块存储服务、对象存储服务等。
对Nova而言&＃xff0c;通过Ironic部署物理机&＃xff0c;和部署虚拟机的调用流程是一样的&＃xff0c;都是通过Nova的接口来执行创建实例。不同之处在于&＃xff0c;调度裸金属时所用的套餐&＃xff0c;与创建虚机的套餐不同&＃xff1b;裸金属节点所属的nova-compute驱动与虚机要用的nova-compute驱动不一样&＃xff1b;虚拟机底层驱动采用的是虚拟化技术&＃xff0c;而物理机采用的是PXE和IPMI技术。以下是Ironic与Nova&＃xff0c;Neutron&＃xff0c;Glance&＃xff0c;Cinder&＃xff0c;Swift等组件交互的逻辑架构图。
2
裸金属服务的部署阶段
部署阶段
部署阶段也称为Provision/Deploy阶段&＃xff0c;租户向云平台申请裸金属资源&＃xff0c;云平台为租户分配资源&＃xff0c;并为裸金属加载系统镜像。
1&＃xff09;在deploy阶段&＃xff0c;ironic-conductor将裸金属设置为PXE引导安装模式&＃xff0c;通知neutron准备好TFTP配置&＃xff0c;然后启动裸金属。裸金属上电后学习到DHCP报文&＃xff0c;根据DHCP报文的TFTP Server地址&＃xff0c;向Ironic节点获取kernel及ramdisk镜像并启动&＃xff0c;这个ramdisk里包含了ironic-python-agent&＃xff1b;在实际使用中&＃xff0c;iPXE会比PXE下载镜像的速度更快&＃xff0c;推荐使用iPXE更好。
2&＃xff09;启动后&＃xff0c;ironic-python-agent会和Ironic控制节点互通&＃xff0c;连接到Ironic控制节点的http server&＃xff0c;获取完整的用户系统镜像。
运行阶段
也称为Tenant阶段&＃xff0c;裸金属服务器启动系统镜像&＃xff0c;业务开始运行
(1) 待部署阶段的镜像获取完成&＃xff0c;Ironic通知裸金属重启&＃xff0c;则进入租户网络运行。
3
不同网络模式下的裸金属部署
原生Ironic支持Flat和VLAN模式的裸金属部署&＃xff0c;而对于Vxlan模式不支持&＃xff0c;我们结合networking-l2gw这个项目&＃xff0c;实现了Vxlan网络模式下的裸金属部署。下面介绍一下每种模式的组网场景。
flat网络模式
1) ironic控制节点所在的管理网络&＃xff08;management network&＃xff09;要和裸机的ipmi网络互通&＃xff0c;因为要对裸机做开关机&＃xff0c;设置bios启动项等操作&＃xff1b;
2) 裸机的deploy网络及tenant网络使用的是同一个flat网络&＃xff08;图中的external network&＃xff09;&＃xff0c;无需进行切换&＃xff0c;且该网络要与管理网络互通&＃xff1b;
3) 下图为裸机tftp的一个截图&＃xff0c;deploy阶段分配了一个external ip&＃xff0c;部署结束后的租户网络依然是使用这个ip。
vlan网络模式
(1) 使用直通网络部署&＃xff0c;需要在neutron里加入networking-generic-switch这个插件&＃xff0c;
(2) Ironic服务在部署阶段&＃xff0c;会通知插件将裸金属所接的交换机端口配置为使用deploy vlan(蓝色实线)
(3) 在运行阶段&＃xff0c;插件将裸金属所接的交换机端口配置为使用tenant vlan&＃xff08;橘色实线&＃xff09;
(4) 部署阶段和运行阶段也可以使用同一个vlan&＃xff0c;那么会分配一个相同的IP&＃xff0c;无需进行切换。
vxlan网络模式
(1) 安装networking-l2gw后&＃xff0c;在neutron里配置并启动neutron-l2gw-agent
(2) 裸金属连接的交换机开启ovsdb的功能。
(3) 在neutron里创建l2gw及l2gw connection, neutron会调用l2gw对应的plugin去建立控制节点到交换机&＃xff0c;以及计算节点到交换机的隧道&＃xff0c;从而来打通虚机到裸机的vpc网络。
(4) 在Ironic控制节点上需要创建一个部署网络里的虚拟网卡&＃xff0c;通过这个虚拟网卡&＃xff0c;裸金属可以与Ironic控制节点上的ironic服务/tftp server/http server互通&＃xff0c;从而获取到部署镜像及用户系统镜像。
(5) 计算节点与交换机建立的隧道信息&＃xff0c;以及交换机上学习到的虚机MAC地址信息可以通过执行ovsdb-client dump --pretty tcp:<交换机ip>:6632 看到
相关文章
360云计算
由360云平台团队打造的技术分享公众号&＃xff0c;内容涉及数据库、大数据、微服务、容器、AIOps、IoT等众多技术领域&＃xff0c;通过夯实的技术积累和丰富的一线实战经验&＃xff0c;为你带来最有料的技术分享
京公网安备 11010802041100号