DMDSC共享存储集群——搭建部署教程
DMDSC共享存储集群——搭建部署教程
- 一、DMDSC简介
- 二、DMDSC部署
-
- 1、准备工作
-
-
- 1.1 IP规划
- 1.2 挂载共享磁盘
-
- 2、配置DSC
-
-
- 2.1配置初始化文件dmdcr_cfg.ini（两台）
- 2.2机器DSC01使用DMASMCMD工具初始化
- 2.3配置dmasvrmal.ini文件（两台）
- 2.4配置dmdcr.ini文件
-
- 3、启动集群
-
-
- 3.1启动DMCSS
- 3.2启动DMASM
- 3.3创建DMASM磁盘组
- 3.4初始化库
-
- 3.4.1配置dminit.ini文件（在dsc01节点上配置即可）
- 3.4.2启动dminit工具初始化数据库；
- 3.5启动数据库服务器
-
- 3.5.1前台式
-
一、DMDSC简介
DM共享存储数据库集群的英文全称DM Data Shared Cluster，简称DMDSC。DMDSC集群是一个多实例、单数据库的系统。某一个数据库实例故障后，不会导致数据库服务无法提供。DMDSC集群主要由数据库和数据库实例、共享存储、本地存储、通信网络、以及集群控制软件DMCSS组成。
二、DMDSC部署
1、准备工作
1.1 IP规划
| 主机 | 公有IP | 私有IP |
|---|---|---|
| DSC01 | 192.168.11.191 | 192.168.11.201 |
| DSC02 | 192.168.11.192 | 192.168.11.202 |
1.2 挂载共享磁盘
在虚拟机安装目录（F:\软件\vm）下，执行创建虚拟磁盘文件的命令
.\vmware-vdiskmanager.exe -c -s 20G -a lsilogic -t 2 "E:\CentDM\share\share.vmdk"
打开两台虚拟机的目录，编辑DSC01.vmx和DSC02.vmx文件，加入下面两行
disk.locking="FALSE"
disk.EnableUUID = "TRUE"
两台机器将共享磁盘添加到硬盘
编辑虚拟机设置——>添加——>硬盘——>选择现有磁盘
划分存储（启动1台进行下面划分存储操作，另一台结束后自动同步）
lsblk
fdisk /dev/sdb
依次输入：
n p 1 回车 +100M 回车
n p 2 回车 +100M 回车
n p 3 回车 +2048M 回车
n p 回车 回车
w 回车
分好之后，如下所示
启动另一台虚拟机，查询发现已经自动同步分区
lsblk
绑定裸设备，两台执行
[root@dsc01 ~]# vim /etc/udev/rules.d/80-raw.rules
ACTION=="add",KERNEL=="sdb1",RUN+="/bin/raw /dev/raw/raw1 %N"
ACTION=="add",KERNEL=="sdb2",RUN+="/bin/raw /dev/raw/raw2 %N"
ACTION=="add",KERNEL=="sdb3",RUN+="/bin/raw /dev/raw/raw3 %N"
ACTION=="add",KERNEL=="sdb4",RUN+="/bin/raw /dev/raw/raw4 %N"
ACTION=="add",KERNEL=="raw[1-4]", OWNER="dmdba", GROUP="dinstall", MODE="660"
分别执行以下命令完成裸设备绑定；
[root@dsc01 ~]# partprobe /dev/sdb
[root@dsc01 ~]# udevadm control --reload-rules
[root@dsc01 ~]# udevadm trigger --type=devices --action=change
[root@dsc02 ~]# partprobe /dev/sdb
[root@dsc02 ~]# udevadm control --reload-rules
[root@dsc02 ~]# udevadm trigger --type=devices --action=change
查看裸设备；
[root@dsc01 ~]# ll /dev/raw/*
[root@dsc01 ~]# blockdev --getsize64 /dev/raw/raw1[1/2/3/4]
[root@dsc02 ~]# ll /dev/raw/*
[root@dsc02 ~]# blockdev --getsize64 /dev/raw/raw1[1/2/3/4]
chown -R dmdba:dinstall /dev/raw/raw1
chown -R dmdba:dinstall /dev/raw/raw2
chown -R dmdba:dinstall /dev/raw/raw3
chown -R dmdba:dinstall /dev/raw/raw4
2、配置DSC
2.1配置初始化文件dmdcr_cfg.ini（两台）
[dmdba@DSC01 ~]$ vim /dm8/data/dmdcr_cfg.ini
DCR_N_GRP = 3
DCR_VTD_PATH = /dev/raw/raw2
DCR_OGUID = 63635
[GRP]
DCR_GRP_TYPE = CSS
DCR_GRP_NAME = GRP_CSS
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_CSS]
DCR_EP_NAME = CSS0
DCR_EP_HOST = 192.168.11.201
DCR_EP_PORT = 9341
[GRP_CSS]
DCR_EP_NAME = CSS1
DCR_EP_HOST = 192.168.11.202
DCR_EP_PORT = 9343
[GRP]
DCR_GRP_TYPE = ASM
DCR_GRP_NAME = GRP_ASM
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_ASM]
DCR_EP_NAME = ASM0
DCR_EP_SHM_KEY = 93360
DCR_EP_SHM_SIZE = 10
DCR_EP_HOST = 192.168.11.201
DCR_EP_PORT = 9349
DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP_ASM]
DCR_EP_NAME = ASM1
DCR_EP_SHM_KEY = 93361
DCR_EP_SHM_SIZE = 10
DCR_EP_HOST = 192.168.11.202
DCR_EP_PORT = 9351
DCR_EP_ASM_LOAD_PATH = /dev/raw
[GRP]
DCR_GRP_TYPE = DB
DCR_GRP_NAME = GRP_DSC
DCR_GRP_N_EP = 2
DCR_GRP_DSKCHK_CNT = 60
[GRP_DSC]
DCR_EP_NAME = DSC0
DCR_EP_SEQNO = 0
DCR_CHECK_PORT = 9741
DCR_EP_PORT = 5238
[GRP_DSC]
DCR_EP_NAME = DSC1
DCR_EP_SEQNO = 1
DCR_CHECK_PORT = 9742
DCR_EP_PORT = 5238
2.2机器DSC01使用DMASMCMD工具初始化
[dmdba@DSC01 ~]$ cd /dm8/bin
[dmdba@DSC01 bin]$ ./dmasmcmd
DMASMCMD V8
ASM>create dcrdisk '/dev/raw/raw1' 'dcr'
ASM>create votedisk '/dev/raw/raw2' 'vote'
ASM>create asmdisk '/dev/raw/raw3' 'LOG0'
ASM>create asmdisk '/dev/raw/raw4' 'DATA0'
ASM>init dcrdisk '/dev/raw/raw1' from '/dm8/data/dmdcr_cfg.ini' identified by '123456'
ASM>init votedisk '/dev/raw/raw2' from '/dm8/data/dmdcr_cfg.ini'
2.3配置dmasvrmal.ini文件（两台）
[dmdba@DSC01 ~]$ vim /dm8/data/dmasvrmal.ini
[MAL_INST1]
MAL_INST_NAME = ASM0
MAL_HOST = 192.168.11.201
MAL_PORT = 7236
[MAL_INST2]
MAL_INST_NAME = ASM1
MAL_HOST = 192.168.11.202
MAL_PORT = 7237
2.4配置dmdcr.ini文件
DMASM的两个节点分别配置dmdcr.ini，dmdcr_path相同，dmasvrmal.ini文件内容也相同，dmdcr_seqno分别为0和1。
[dmdba@DSC01 ~]$ vim /dm8/data/dmdcr.ini
DMDCR_PATH = /dev/raw/raw1
DMDCR_MAL_PATH =/dm8/data/dmasvrmal.ini
#dmasmsvr 使用的 MAL 配置文件路径
DMDCR_SEQNO = 0
#ASM 重启参数，命令行方式启动
DMDCR_ASM_RESTART_INTERVAL = 0
DMDCR_ASM_STARTUP_CMD = /dm8/bin/dmasmsvr dcr_ini=/dm8/data/dmdcr.ini
#DB 重启参数，命令行方式启动
DMDCR_DB_RESTART_INTERVAL = 0
DMDCR_DB_STARTUP_CMD = /dm8/bin/dmserver path=/dm8/data/dsc0_config/dm.ini dcr_ini=/dm8/data/dmdcr.ini
[dmdba@DSC02 ~]$ vim /dm8/data/dmdcr.ini
DMDCR_PATH = /dev/raw/raw1
DMDCR_MAL_PATH =/dm8/data/dmasvrmal.ini
#dmasmsvr 使用的 MAL 配置文件路径
DMDCR_SEQNO = 1
#ASM 重启参数，命令行方式启动
DMDCR_ASM_RESTART_INTERVAL = 0
DMDCR_ASM_STARTUP_CMD = /dm8/bin/dmasmsvr dcr_ini=/dm8/data/dmdcr.ini
#DB 重启参数，命令行方式启动
DMDCR_DB_RESTART_INTERVAL = 0
DMDCR_DB_STARTUP_CMD = /dm8/bin/dmserver path=/dm8/data/dsc0_config/dm.ini dcr_ini=/dm8/data/dmdcr.ini
3、启动集群
两个节点分别在$DM_HOME/bin目录下先后启动dmcss、dmasm程序；
3.1启动DMCSS
[dmdba@DSC01 bin]$ ./dmcss DCR_INI=/dm8/data/dmdcr.ini
[dmdba@DSC02 bin]$ ./dmcss DCR_INI=/dm8/data/dmdcr.ini
3.2启动DMASM
[dmdba@DSC01 bin]$ ./dmasmsvr DCR_INI=/dm8/data/dmdcr.ini
[dmdba@DSC02 bin]$ ./dmasmsvr DCR_INI=/dm8/data/dmdcr.ini
3.3创建DMASM磁盘组
新开一个终端，使用 dmasmtool 工具创建 DMASM 磁盘组，在dsc01节点（其中一个节点执行即可）的$DM_HOME/bin目录下执行以下命令：
[dmdba@DSC01 ~]# cd /dm8/bin
[dmdba@DSC01 bin]# ./dmasmtool DCR_INI=/dm8/data/dmdcr.ini
3.4初始化库
3.4.1配置dminit.ini文件（在dsc01节点上配置即可）
[dmdba@DSC01 ~]$ vim /dm8/data/dminit.ini
db_name = dsc
system_path = +DMDATA/data
system = +DMDATA/data/dsc/system.dbf
system_size = 128
roll = +DMDATA/data/dsc/roll.dbf
roll_size = 128
main = +DMDATA/data/dsc/main.dbf
main_size = 128
ctl_path = +DMDATA/data/dsc/dm.ctl
ctl_size = 8
log_size = 256
dcr_path = /dev/raw/raw1
dcr_seqno = 0
auto_overwrite = 1
page_size = 16
[DSC0]
config_path = /dm8/data/dsc0_config
port_num = 5238
mal_host = 192.168.11.201
mal_port = 9340
log_path = +DMLOG/log/dsc0_log01.log
log_path = +DMLOG/log/dsc0_log02.log
[DSC1]
config_path = /dm8/data/dsc1_config
port_num = 5238
mal_host = 192.168.11.202
mal_port = 9341
log_path = +DMLOG/log/dsc1_log01.log
log_path = +DMLOG/log/dsc1_log02.log
3.4.2启动dminit工具初始化数据库；
[dmdba@DSC01 bin]$ ./dminit control=/dm8/data/dminit.ini
dminit执行完成后，会生成两个配置文件，分别为dsc0_config和dsc1_config，里面有dm.ini和dmmal.ini文件;
将属于dsc02节点的dsc1_config里的文件发送到dsc02节点上；
[dmdba@dsc01 data]$ scp -r dsc1_config/ [email protected]:/dm8/data
3.5启动数据库服务器
3.5.1前台式
（1）分别进入$DM_HOME/bin目录下启动dsc01和dsc02：
[dmdba@DSC01 bin]$ ./dmserver /dm8/data/dsc0_config/dm.ini dcr_ini=/dm8/data/dmdcr.ini
[dmdba@DSC02 bin]$ ./dmserver /dm8/data/dsc1_config/dm.ini dcr_ini=/dm8/data/dmdcr.ini
dsc01 CSS窗口show命令查看sys_status 字段为 OPEN，vtd_status 字段为 WORKING，active 字段为 TRUE 说明 db 服务正常，至此DSC数据共享集群搭建完成.
