xen虚拟化实战系列(十二)之xen虚拟机高可用之在线迁移

xen虚拟化实战系列文章列表

xen虚拟化实战系列(一)之xen虚拟化环境安装
xen虚拟化实战系列(二)之xen虚拟机安装
xen虚拟化实战系列(三)之xen虚拟机复制
xen虚拟化实战系列(四)之xen虚拟机扩展磁盘空间一法
xen虚拟化实战系列(五)之xen虚拟机扩展磁盘空间再一法
xen虚拟化实战系列(六)之xen虚拟机破解密码

xen虚拟化实战系列(七)之xen虚拟机VNC访问配置

xen虚拟化实战系列(八)之xen虚拟机开机自启动配置
xen虚拟化实战系列(九)之xen虚拟机时间配置
xen虚拟化实战系列(十)之xen虚拟机双网卡配置

xen虚拟化实战系列(十一)之xen虚拟机磁盘文件挂载

xen虚拟化实战系列(十二)之xen虚拟机高可用之在线迁移

xen虚拟化实战系列(十三)之xen虚拟机集中管理之convirt

1. 方案背景概述

本文是有对我们一个xen虚拟化生产环境将要改造的一个方案而来，在项目上线初期，没有上存储，也没有采用商业化的服务器虚拟化解决方案如VMware ESXi，而是采用的开源的Xen虚拟化平台。xen虚拟机磁盘也都是采用本地磁盘，当时为了项目上线，风险也是很大的，只能充分的做好备份了。现在服务器运行了几年，需要升级改造，但是完全采用新的虚拟化方案来安装，部署，迁移系统，工作量太大，也不太实际，也只有在原有环境上进行改造了。

初步方案是在虚拟化服务器增加HBA卡，用于连接一台现有光纤存储，虚拟化服务器连接同一个存储空间，配置成集群文件系统，并将虚拟机磁盘文件迁移到集群文件系统上, 这样就构成了一个高可用的环境架构，本文就是在这种环境背景下进行的一个环境测试。本文出自：http://koumm.blog.51cto.com

架构图如下：

应用场景如下：

(1) 在虚拟化服务器挂掉的情况下，可以在另一虚拟化服务器上手动启动，减少故障时间，最基本的是保证数据不会丢失。

(2) 可以利用xen虚拟化高可用在线迁移，实现虚拟化服务器计划内停机。

注：为了实现以上方案测试，采用nfs挂载来模拟集群文件系统，实现以上方案与测试。

2.  虚拟化环境介绍

(1) xen虚拟化服务器node1

操作系统版本  : OEL5.8 x64    
开源xen虚拟化 : 自带版本     
桥接IP地址1   : 192.168.233.150     
桥接IP地址2   : 10.10.10.10

测试虚拟机：test01

桥接IP地址1 : 192.168.233.133      
桥接IP地址2 : 10.10.10.11

虚拟磁盘文件位置: /data/test01.img

(2) xen虚拟化服务器node2

操作系统版本    : OEL5.8 x64    
开源xen虚拟化 : 自带版本     
桥接IP地址1   : 192.168.233.151     
桥接IP地址2   : 10.10.10.20

节点2已经按xen虚拟化实战系列(十)之xen虚拟机双网卡配置，配置成了双网桥，这一步也可以不用。

(3) nfs服务器

操作系统版本 : OEL5.8 x64    
桥接IP地址1   : 192.168.233.152     
桥接IP地址2   : 10.10.10.30

3.  共享存储的配置  

本节采用nfs来实现共享存储，以后将采用GFS2集群文件系统。

(1)  nfs服务配置

启动nfs服务 

# chkconfig nfs on 

(2)  xen node1服务器上
首先关机test01虚拟机，查看到test01虚拟机的磁盘文件是/data/test01.img，这里先将test01.img文件移到其它目录，然后挂载nfs目录到/data目录下。再将test01.img移回来。

挂载nfs目录

将test01.img虚拟磁盘文件移回到/data目录下。

配置/etc/fstab加入自动挂载

# vi /etc/fstab

10.10.10.30:/data /data nfs hard,rw,rsize=32768,wsize=32768 0 0

(3) xen node2服务器上

挂载nfs目录

配置/etc/fstab加入自动挂载

# vi /etc/fstab

10.10.10.30:/data /data nfs hard,rw,rsize=32768,wsize=32768 0 0

4. 准备xen在线迁移环境 

原理: 在线迁移法是通过迭代的方式将内存拷贝到目标主机，然后暂停虚拟机100ms以内的时间，这段时间内，将最后修改过的内存与CPU状态发送到目标主机。然后关闭虚拟机，并在目标主机上恢复。
(1) 在xen虚拟主机node2上创建虚拟机配置文件

(2) 修改两虚拟主机xen配置文件

注：node1,node2都要修改，这个是最关键的内容。

18行加上注释

33行取消注释

47行取消注释

60行取消注释，61上加上注释

(3) 分别重启两虚拟主机xend服务

5. xen在线迁移测试

(1) 在node1虚拟主机上启动xen虚拟机test01

查看虚拟机的IP地址

# xm console test01 

Oracle Linux Server release 5.8    
Kernel 2.6.18-308.el5xen on an x86_64 

test01 login: root    
Password:     
Last login: Sun Sep  1 00:08:50 on xvc0     
[root@test01 ~]#     
[root@test01 ~]# ifconfig     
eth0      Link encap:Ethernet  HWaddr 00:16:3E:66:FF:31  
          inet addr:192.168.233.133  Bcast:192.168.233.255  Mask:255.255.255.0
          UP BROADCAST RUNNING MULTICAST  MTU:1500  Metric:1     
          RX packets:30 errors:0 dropped:0 overruns:0 frame:0     
          TX packets:24 errors:0 dropped:0 overruns:0 carrier:0     
          collisions:0 txqueuelen:1000     
          RX bytes:3287 (3.2 KiB)  TX bytes:2831 (2.7 KiB) 

eth1      Link encap:Ethernet  HWaddr 00:16:3E:1A:00:01  
          inet addr:10.10.10.11  Bcast:10.10.10.255  Mask:255.255.255.0
          UP BROADCAST RUNNING MULTICAST  MTU:1500  Metric:1     
          RX packets:32 errors:0 dropped:0 overruns:0 frame:0     
          TX packets:22 errors:0 dropped:0 overruns:0 carrier:0     
          collisions:0 txqueuelen:1000     
          RX bytes:3449 (3.3 KiB)  TX bytes:2723 (2.6 KiB) 

lo        Link encap:Local Loopback  
          inet addr:127.0.0.1  Mask:255.0.0.0     
          UP LOOPBACK RUNNING  MTU:16436  Metric:1     
          RX packets:8 errors:0 dropped:0 overruns:0 frame:0     
          TX packets:8 errors:0 dropped:0 overruns:0 carrier:0     
          collisions:0 txqueuelen:0     
          RX bytes:560 (560.0 b)  TX bytes:560 (560.0 b) 

[root@test01 ~]# 

(2) 准备一个窗口不停的ping test01虚拟机IP

可以看到整个过程比较平稳，就一两个包超过1ms，其它都在1ms以下。网络完全没有中断，整个迁移过程比较快速。

(3) 在node1虚拟主机上操作开始迁移

可以看到test01 xen虚拟机在node1 xen虚拟主机上，并开始执行在线迁移命令。

# xm migrate -l test01 192.168.233.151 

下面命令用来查看test01 xen虚拟机在迁移中与迁移后的状态，可以看到test01 xen虚拟机先变成迁移状态。迁移完成后，test01 xen虚拟机在node1 xen虚拟主机列表中消失。已经迁移到node2 xen虚拟主机上。

(3) 在node2虚拟主机上

下面命令用来查看test01 xen虚拟机在迁移中与迁移后的状态，可以看到test01 xen虚拟机在接收迁移状态。迁移完成后，test01 xen虚拟机在node2 xen虚拟主机上已经成功迁移过来。

至此xen虚拟化实战系列(十二)之xen虚拟机高可用之在线迁移文章结束，简单总结如下：对开源xen真是又爱又恨，希望开源xen在CentOS6.X能发展更好。

本文转自 koumm 51CTO博客，原文链接：http://blog.51cto.com/koumm/1286643，如需转载请自行联系原作者