概述

装RAC环境的时候比较麻烦的是配置共享存储，使用ASM共享磁盘至少3块磁盘，下面介绍一下VMware通过UDEV来共享裸盘。

(做以下操作时需要先关闭虚拟机，要不设置后会报无法获得所有权错误)

1、用cmd命令行进入到VMware，打开安装位置

Win+R进入命令行如图

2、执行以下命令创建磁盘

脚本如下：

在cmd，命令行执行以下语句RAC1是虚拟机RAC1的安装目录 asm-vote是磁盘名称

vmware-vdiskmanager.exe -c -s 10g -a lsilogic -t 2 "D:\RAC1\sharedisk\asm-vote.vmdk"
vmware-vdiskmanager.exe -c -s 20g -a lsilogic -t 2 "D:\RAC1\sharedisk\asm01.vmdk"
vmware-vdiskmanager.exe -c -s 20g -a lsilogic -t 2 "D:\RAC1\sharedisk\asm02.vmdk"
vmware-vdiskmanager.exe -c -s 20g -a lsilogic -t 2 "D:\RAC1\sharedisk\asm03.vmdk"
vmware-vdiskmanager.exe -c -s 20g -a lsilogic -t 2 "D:\RAC1\sharedisk\asm04.vmdk"

3、查看共享磁盘

4、编辑虚拟机的.vmx（虚拟机名.vmx）参数文件

将以下内容添加到参数文件中注意SCSI的端口号和filename、filename要和上面磁盘保持一致

scsi1.present = "TRUE"
scsi1.virtualDev = "lsilogic"
scsi1.sharedBus = "virtual"
 
scsi1:1.present = "TRUE"
scsi1:1.mode = "independent-persistent"
scsi1:1.filename = "D:\RAC1\sharedisk\asm-vote.vmdk"
scsi1:1.deviceType = "plainDisk"
 
scsi1:2.present = "TRUE"
scsi1:2.mode = "independent-persistent"
scsi1:2.filename = "D:\RAC1\sharedisk\asm01.vmdk"
scsi1:2.deviceType = "plainDisk" 
 
scsi1:3.present = "TRUE"
scsi1:3.mode = "independent-persistent"
scsi1:3.filename = "D:\RAC1\sharedisk\asm02.vmdk"
scsi1:3.deviceType = "plainDisk"
 
scsi1:4.present = "TRUE"
scsi1:4.mode = "independent-persistent"
scsi1:4.filename = "D:\RAC1\sharedisk\asm03.vmdk"
scsi1:4.deviceType = "plainDisk"
 
scsi1:5.present = "TRUE"
scsi1:5.mode = "independent-persistent"
scsi1:5.filename = "D:\RAC1\sharedisk\asm04.vmdk"
scsi1:5.deviceType = "plainDisk"
 
disk.locking = "false"
diskLib.dataCacheMaxSize = "0"
diskLib.dataCacheMaxReadAheadSize = "0"
diskLib.DataCacheMinReadAheadSize = "0"
diskLib.dataCachePageSize = "4096"
diskLib.maxUnsyncedWrites = "0"
 
disk.EnableUUID ="TRUE" ----添加这个参数是为了udev能读到磁盘的UUID

修改完第一台虚拟机后在第二台上将以下参数复制到.vmx参数文件中去

scsi1.sharedBus = "virtual"
disk.locking = "false"
diskLib.dataCacheMaxSize = "0"
diskLib.dataCacheMaxReadAheadSize = "0"
diskLib.DataCacheMinReadAheadSize = "0"
diskLib.dataCachePageSize = "4096"
diskLib.maxUnsyncedWrites = "0"
disk.EnableUUID ="TRUE"

5、 在第一台添加完磁盘后，在第二台上手动添加并且以第一台保持一致都是永久型

手动添加如下：

6、注意添加磁盘时一定要和第一台机器的磁盘顺序保持一致

7、查看磁盘

启动虚拟机，执行命令fdisk -l检查

8、格式化硬盘

在配置裸盘之前需要先格式化硬盘：

# fdisk /dev/sdb
Command (m for help): n
Partition type:
 p primary (0 primary, 0 extended, 4 free)
 e extended
Select (default p): p
Partition number (1-4, default 1): 1
First sector (2048-20971519, default 2048): 
Using default value 2048
Last sector, +sectors or +size{K,M,G} (2048-20971519, default 20971519): 
Using default value 20971519
Partition 1 of type Linux and of size 10 GiB is set
Command (m for help): w
The partition table has been altered!
Calling ioctl() to re-read partition table.
Syncing disks.
最后 w 命令保存更改

在其中一个节点重复上面步骤，格式化其他盘，得到如下分区

[root@node2 dev]# ls /dev/sd*
/dev/sda /dev/sda1 /dev/sda2 /dev/sda3 /dev/sdb /dev/sdb1 /dev/sdc /dev/sdc1 /dev/sdd /dev/sdd1 /dev/sde /dev/sde1 /dev/sdf /dev/sdf1

9、配置裸设备

添加完硬盘后开启虚拟机配置udev裸磁盘脚本如下

两个节点上编辑/etc/udev/rules.d/60-raw.rules文件，增加以下语句：（注意不要有空格）

ACTION=="add",KERNEL=="sdb1",RUN+="/bin/raw /dev/raw/raw1 %N" 
ACTION=="add",KERNEL=="sdc1",RUN+="/bin/raw /dev/raw/raw2 %N" 
ACTION=="add",KERNEL=="sdd1",RUN+="/bin/raw /dev/raw/raw3 %N" 
ACTION=="add",KERNEL=="sde1",RUN+="/bin/raw /dev/raw/raw4 %N" 
ACTION=="add",KERNEL=="sdf1",RUN+="/bin/raw /dev/raw/raw5 %N" 
KERNEL=="raw*",OWNER="grid",GROUP="asmadmin", MODE="0660"
--其原理是：/dev/mapper/下的盘符其实是指向/dev/sd*的，将这些聚合盘映射为裸设备，也可以同时改变权限，缺点在于没有alias容易混淆。

10、裸设备的绑定

两个节点上都运行以下两条语句，完成裸设备的绑定

partprobe /dev/sdb
partprobe /dev/sdc
partprobe /dev/sdd
partprobe /dev/sde
partprobe /dev/sdf
udevadm control --reload-rules

11、启动udev

redhat7: systemctl restart systemd-udev-trigger.service

redhat6: start_udev

12、检查磁盘节点一和节点二一致

总结：

RAC方面配置的东西很多，只能分一段一段来介绍了，大家可以先用上面的方式来实现共享存储，这里也可以用openfiler来实现，但是容易碰到I/0或者网络上的问题，所以就用这个演示了，这里我用的是60-raw.rules规则，后面分享下99-fuse.rules的，感兴趣的朋友可以关注下！！