Oracle之利用iscsi构建RAC共享存储测试

小灰灰 2022-07-12 13:15 297阅读 0赞

Centos下配置iscsi  共享存储

ISCSI存储分为服务端(server，提供target存储给客户端挂载使用)和客户段(client，使用服务端提供的target来存放文件等)，Centos6.8下对应的agent为scsi-target-utils(服务端安装)和iscsi-initiator(客户端安装)，以下的安装，全部是用虚拟机安装的。

我们在搭建RAC的时候会用到iscsi来构建共享存储，下面就介绍利用iscsi 怎样构建RAC的共享存储.

**1. 环境信息**

rac1：192.168.180.2

rac2：192.168.180.3

这里我们选rac1为iscsi服务器，然后把其上的磁盘共享给rac2使用

注意：这里我们可以选用这个2个节点任何一台或者其他机器作为iscsi服务器，这里为了方便就在rac1上搭建iscsi服务器

首先我们在rac1上添加需要共享的磁盘，也就是rac的磁盘组。这里我已经在rac1上分配了6块盘，说明如下：

Ocrvotedisk 3块 4G

Data            2块 50G

FRA\_ARC   1 块 60G

![Image 1][]![Center][]

![Image 1][]

**在rac1上查看：**

\[root@rac1 ~\]\# fdisk -l

Disk /dev/sda: 64.4 GB,64424509440 bytes

255 heads, 63sectors/track, 7832 cylinders

Units = cylinders of 16065\* 512 = 8225280 bytes

Sector size(logical/physical): 512 bytes / 512 bytes

I/O size(minimum/optimal): 512 bytes / 512 bytes

Disk identifier:0x0000d707

Device Boot      Start         End      Blocks  Id  System

/dev/sda1               1        5222   41943040   83  Linux

/dev/sda2   \*       5222        6528    10485760  83  Linux

/dev/sda3            6528        7293    6144000   82  Linux swap / Solaris

Disk /dev/sdb: 4294 MB,4294967296 bytes

255 heads, 63sectors/track, 522 cylinders

Units = cylinders of 16065\* 512 = 8225280 bytes

Sector size(logical/physical): 512 bytes / 512 bytes

I/O size(minimum/optimal): 512 bytes / 512 bytes

Disk identifier:0x00000000

Disk /dev/sdd: 4294 MB,4294967296 bytes

255 heads, 63sectors/track, 522 cylinders

Units = cylinders of 16065\* 512 = 8225280 bytes

Sector size (logical/physical):512 bytes / 512 bytes

I/O size(minimum/optimal): 512 bytes / 512 bytes

Disk identifier:0x00000000

Disk /dev/sde: 53.7 GB,53687091200 bytes

255 heads, 63sectors/track, 6527 cylinders

Units = cylinders of 16065\* 512 = 8225280 bytes

Sector size(logical/physical): 512 bytes / 512 bytes

I/O size(minimum/optimal): 512 bytes / 512 bytes

Disk identifier:0x00000000

Disk /dev/sdf: 53.7 GB,53687091200 bytes

255 heads, 63sectors/track, 6527 cylinders

Units = cylinders of 16065\* 512 = 8225280 bytes

Sector size(logical/physical): 512 bytes / 512 bytes

I/O size(minimum/optimal): 512 bytes / 512 bytes

Disk identifier:0x00000000

Disk /dev/sdg: 64.4 GB,64424509440 bytes

255 heads, 63sectors/track, 7832 cylinders

Units = cylinders of 16065\* 512 = 8225280 bytes

Sector size(logical/physical): 512 bytes / 512 bytes

I/O size(minimum/optimal): 512 bytes / 512 bytes

Disk identifier:0x00000000

Disk /dev/sdc: 4294 MB,4294967296 bytes

255 heads, 63sectors/track, 522 cylinders

Units = cylinders of 16065\* 512 = 8225280 bytes

Sector size(logical/physical): 512 bytes / 512 bytes

I/O size(minimum/optimal): 512 bytes / 512 bytes

Disk identifier:0x00000000

以上说明磁盘已经在rac1上挂载上，下面就利用iscsi 共享给rac2

**2．配置iscsi服务端（在rac1上操作）**

**a）安装scsi-target-utils**

\[root@rac1 os\]\# ll scsi-target-utils-1.0.24-18.el6.x86\_64.rpm

\[root@rac1 os\]\# rpm -ivh scsi-target-utils-1.0.24-18.el6.x86\_64.rpm

注意：在安装的时候有可能提示缺少依赖包，先将这些依赖包安装上以后就可以了

**b）配置targets.conf**

\[root@rac1 os\]\# vi /etc/tgt/targets.conf

![Image 1][]![Center 1][]

注意：里面添加的就是想要共享给rac2的磁盘

![Image 1][]

**c）启动tgtd**

\[root@rac1 os\]\# servicetgtd start

Starting SCSI targetdaemon:                              \[  OK  \]

\[root@rac1 os\]\# chkconfigtgtd on

**3.配置iscsi客户端（在rac2上操作）**

**a）安装iscsi-initiator-utils**

\[root@rac2 Packages\]\# ll iscsi-initiator-utils-6.2.0.873-21.el6.x86\_64.rpm

\-r--r--r-- 3 root root747940 May 12  2016iscsi-initiator-utils-6.2.0.873-21.el6.x86\_64.rpm

\[root@rac2 Packages\]\# rpm -ivh iscsi-initiator-utils-6.2.0.873-21.el6.x86\_64.rpm

**b）配置nitiatorname.iscsi**

\[root@rac2 Packages\]\# vi /etc/iscsi/initiatorname.iscsi

![Image 1][]![Image 1][]![Center 2][]

注意：红框中的值就是rac1上 /etc/tgt/targets.conf 里配置的值

c）启动iscsi

\[root@rac2 Packages\]\#service iscsi start

\[root@rac2 Packages\]\#chkconfig iscsi on

注意：如果我安装操作系统时已经安装了iscsi-initiator-utils软件包所以不用再另外安装，直接配置就行。

**4.共享存储（rac2上操作）**

**a）通过3260端口查看开放了哪些共享存储：**  
\[root@rac2 ~\]\#  iscsiadm -m discovery -tsendtargets -p 192.168.180.2:3260

192.168.180.2:3260,1 iqn.2008-09.com.example:server.target4

\[root@rac2 ~\]\# iscsiadm -m node -T discovery -T iqn.2008-09.com.example:server.target4 -p 192.168.180.2:3260

**b）登录共享存储：**  
\# iscsiadm -m node -T iqn.2008-09.com.example:server.target4 -p 192.168.180.2:3260 -l

**c）探测下共享存储的目录：**  
\# partprobe  
\# fdisk -l

**d）退出共享存储目录：**  
\# iscsiadm -m node -T iqn.2008-09.com.example:server.target4 -p 192.168.1.251:3260  -u  
**\# fdisk -l (****将查看不到共享目录)**

**e）删除共享存储目录：**  
\# service iscsi restart  
\# iscsiadm -m node -T iqn.2008-09.com.example:server.target4  -p 192.168.0.13:3260 -u  
\# iscsiadm -m node -T iqn.2008-09.com.example:server.target4  -p 192.168.0.13:3260 -o delete

**f）重新服务并重新创建登录：**

\# service iscsi restart  
\# iscsiadm -m discovery -t sendtargets -p 192.168.180.2:3260  
\# iscsiadm -m node -T iqn.2008-09.com.example:server.target4 -p 192.168.0.13:3260  -l

**g）为共享存储分区创建目录**

\# fdisk -l   我们发现多了一个sdb

然后就是给这个虚拟硬盘sdb分区，然后挂载

\#fdisk /dev/sdb

Command (m for help): 在这里按m，就会输出帮助；  
Command action  
   a toggle a bootable flag  
   b edit bsd disklabel  
   c toggle the dos compatibility flag  
   d delete a partition 注：这是删除一个分区的动作；  
   l list known partition types 注：l是列出分区类型，以供我们设置相应分区的类型；  
   m print this menu 注：m 是列出帮助信息；  
   n add a new partition 注：添加一个分区；  
   o create a new empty DOS partition table  
   p print the partition table 注：p列出分区表；  
   q quit without saving changes 注：不保存退出；  
   s create a new empty Sun disklabel  
   t change a partition's system id 注：t 改变分区类型；  
   u change display/entry units  
   v verify the partition table  
   w write table to disk and exit 注：把分区表写入硬盘并退出；  
   x extra functionality (experts only) 注：扩展应用，专家功能；

\# partprobe  
\# mkfs -t ext3 /dev/sdb1 这一步如果硬盘容量大的话可能会非常慢，时间比较长

\# mkdir /mnt/class  
\# echo "/dev/sdb1 /mnt/class ext3 \_netdev 0 0">>/etc/fstab  
\# mount /mnt/class  
\# dd if=/dev/zero f=myfile bs=1M count=10     （创建成功，可以使用）

**h）卸载共享存储：**  
\# umount /mnt/class/  
\# rmdir /mnt/class/  
\# iscsiadm -m node -T iqn.2008-09.com.example:server.target4:disk1 -p 192.168.0.13:3260 –u  
\# iscsiadm -m node -T iqn.2008-09.com.example:server.target4:disk1 -p 192.168.0.13:3260 -o delete  
\# service iscsi stop  
\# chkconfig iscsi off

\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*客户端配置结束\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*

[Image 1]: 
[Center]: /images/20220710/a92544cd2901467895ce6f306e8a100f.png
[Center 1]: /images/20220710/3a5b0e5fd5a64972b94cdafba291e694.png
[Center 2]: /images/20220710/4d8ede4b998d4d58a48aff0bb55d597c.png