达梦DM8 DW实时主备集群搭建

2024-04-29 04:32

本文主要是介绍达梦DM8 DW实时主备集群搭建,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一、DM DW集群简介

DM 数据守护(Data Watch)将主库(生产库)产生的 Redo 日志传输到备库,备库接收并重新应用 Redo 日志,从而实现备库与主库的数据同步。DM 数据守护的核心思想是监控数据库状态,获取主、备库数据同步情况,为 Redo日志传输与重演过程中出现的各种异常情况提供一系列的解决方案。
DM 数据守护主要由主库、备库、Redo 日志、Redo 日志传输、Redo 日志重演、守护进程(dmwatcher)、监视器(dmmonitor)组成。
如下图所示:
在这里插入图片描述
DM8 数据守护集群结构图

二、搭建步骤

1、实验环境:

虚拟机软件:VirtualBox 6.1
机器名	IP地址	实例信息
主机	192.168.56.103	GRP1_RW_01
备机	192.168.56.104	GRP1_RW_02
确认监视器	192.168.56.105	确认监视器
数据库:DM8 64位,安装包名称为dm8_setup_rh7_64_ent_8.1.1.88.iso 
主机操作系统:CentOS Linux release 7.2.1511 (Core),64位

2、资源规划

机器名IP地址实例信息
主机192.168.56.103GRP1_RW_01
备机192.168.56.104GRP1_RW_02
确认监视器192.168.56.105确认监视器

端口规划
在这里插入图片描述
3、主备库准备

初始化主库
./dminit path=/dm8/data
备份主库(disql命令行中热备)
BACKUP DATABASE BACKUPSET '/dm8/data/BACKUP_FOR_DW';
将备份文件复制到备机中,利用rman进行还原
./dmrman CTLSTMT="RESTORE DATABASE '/dm8/data/DAMENG/dm.ini' FROM BACKUPSET '/dm8/data/BACKUP_FOR_DW'"
./dmrman CTLSTMT="RECOVER DATABASE '/dm8/data/DAMENG/dm.ini' FROM BACKUPSET '/dm8/data/BACKUP_FOR_DW'"
./dmrman CTLSTMT="RECOVER DATABASE '/dm8/data/DAMENG/dm.ini' UPDATE DB_MAGIC"

4、修改主备库配置文件

主库:
[dmdba@dwp DAMENG]$ vi /dm8/data/DAMENG/dm.ini 
INSTANCE_NAME = GRP1_RW_01
PORT_NUM = 5236                   #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60        #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0             #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2             #不允许备库OFFLINE表空间
MAL_INI = 1                         #打开MAL系统
ARCH_INI = 1                        #打开归档配置
RLOG_SEND_APPLY_MON = 64          #统计最近64次的日志发送信息

备库:

[dmdba@dws DAMENG]$ vi /dm8/data/DAMENG/dm.ini
INSTANCE_NAME = GRP1_RW_02
PORT_NUM = 5236                   #数据库实例监听端口
DW_INACTIVE_INTERVAL = 60        #接收守护进程消息超时时间
ALTER_MODE_STATUS = 0             #不允许手工方式修改实例模式/状态/OGUID
ENABLE_OFFLINE_TS = 2             #不允许备库OFFLINE表空间
MAL_INI = 1                         #打开MAL系统
ARCH_INI = 1                        #打开归档配置
RLOG_SEND_APPLY_MON = 64          #统计最近64次的日志发送信息

6.修改主备库dmmal.ini文件
配置 MAL 系统,各主备库的 dmmal.ini 配置必须完全一致,MAL_HOST 使用内部网络IP,MAL_PORT 与 dm.ini 中 PORT_NUM 使用不同的端口值,MAL_DW_PORT 是各实例 对应的守护进程之间,以及守护进程和监视器之间的通信端口,配置如下:

vi /dm8/data/DAMENG/dmmal.iniMAL_CHECK_INTERVAL = 5
MAL_CONN_FAIL_INTERVAL = 5
[MAL_INST1]MAL_INST_NAME = GRP1_RW_01MAL_HOST = 10.0.3.103MAL_PORT = 5238MAL_INST_PORT = 5236MAL_INST_HOST = 192.168.56.103MAL_DW_PORT = 5239MAL_INST_DW_PORT = 5237
[MAL_INST2]MAL_INST_NAME = GRP1_RW_02MAL_HOST = 10.0.3.104MAL_PORT = 5238MAL_INST_PORT = 5236MAL_INST_HOST = 192.168.56.104MAL_DW_PORT = 5239MAL_INST_DW_PORT = 5237

7.配置 dmarch.ini
修改 dmarch.ini,配置本地归档和实时归档。
主库:

vi /dm8/data/DAMENG/dmarch.ini[ARCHIVE_TIMELY1]
ARCH_TYPE = REALTIME
ARCH_DEST = GRP1_RW_02[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /dm8/data/DAMENG/arch
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 0

备库:

vi /dm8/data/DAMENG/dmarch.ini 
[ARCHIVE_TIMELY1]
ARCH_TYPE = REALTIME
ARCH_DEST = GRP1_RW_01
[ARCHIVE_LOCAL1]
ARCH_TYPE = LOCAL
ARCH_DEST = /dm8/data/DAMENG/arch
ARCH_FILE_SIZE = 128
ARCH_SPACE_LIMIT = 0

8、配置 dmwatcher.ini
修改 dmwatcher.ini 配置守护进程,配置为全局守护类型,使用自动切换模式。
主库:

[GRP1]DW_TYPE = GLOBALDW_MODE = AUTODW_ERROR_TIME = 10INST_RECOVER_TIME = 60INST_ERROR_TIME = 10INST_OGUID = 333555INST_INI = /dm8/data/DAMENG/dm.iniINST_AUTO_RESTART = 1INST_STARTUP_CMD = /dm8/bin/dmserverRLOG_SEND_THRESHOLD = 0RLOG_APPLY_THRESHOLD = 0

备库:

[GRP1]DW_TYPE = GLOBALDW_MODE = AUTODW_ERROR_TIME = 10INST_RECOVER_TIME = 60INST_ERROR_TIME = 10INST_OGUID = 333555INST_INI = /dm8/data/DAMENG/dm.iniINST_AUTO_RESTART = 1INST_STARTUP_CMD = /dm8/bin/dmserverRLOG_SEND_THRESHOLD = 0RLOG_APPLY_THRESHOLD = 0

9、配置监视器
由于主库和实时备库的守护进程配置为自动切换模式,因此这里选择配置确认监视器。 和普通监视器相比,确认监视器除了相同的命令支持外,在主库发生故障时,能够自动通知 实时备库接管为新的主库,具有自动故障处理的功能。

vi /dm8/data/DAMENG/dmmonitor.ini
MON_DW_CONFIRM = 1
MON_LOG_PATH = /dm8/data/log
MON_LOG_INTERVAL = 60
MON_LOG_FILE_SIZE = 32
MON_LOG_SPACE_LIMIT = 0
[GRP1]
MON_INST_OGUID = 333555
MON_DW_IP = 10.0.3.103:5239
MON_DW_IP = 10.0.3.104:5239

10.启动主备库,修改库模式
在mount 方式启动主库和备库

./dmserver /dm8/data/DAMENG/dm.ini mount
登录主库和备库并修改以下参数
SQL> SP_SET_PARA_VALUE(1,'ALTER_MODE_STATUS',1);
DMSQL executed successfully
used time: 4.841(ms). Execute id is 1.
SQL> sp_set_oguid(333555);
DMSQL executed successfully
used time: 8.961(ms). Execute id is 2.
SQL> alter database standby;     -------主库则为primary
executed successfully
used time: 2.144(ms). Execute id is 0.
SQL> SP_SET_PARA_VALUE(1,'ALTER_MODE_STATUS',0);
DMSQL executed successfully
used time: 3.567(ms). Execute id is 3.

11、启动主备库及监视器

/dm8/bin/dmwatcher /dm8/data/DAMENG/dmwatcher.ini 
/dm8/bin/dmmonitor /dm8/data/DAMENG/dmmonitor.ini 

主库守护进程输出信息
在这里插入图片描述
备库守护进程输出信息
在这里插入图片描述
监视器输出信息

show
2021-03-09 15:24:38 
#================================================================================#
GROUP            OGUID       MON_CONFIRM     MODE            MPP_FLAG  
GRP1             333555      TRUE            AUTO            FALSE     <<DATABASE GLOBAL INFO:>>
IP              MAL_DW_PORT  WTIME                WTYPE     WCTLSTAT  WSTATUS        INAME            INST_OK   N_EP  N_OK  ISTATUS     IMODE     DSC_STATUS     RTYPE     RSTAT    
10.0.3.103      5239         2021-03-09 15:24:37  GLOBAL    VALID     OPEN           GRP1_RW_01       OK        1     1     OPEN        PRIMARY   DSC_OPEN       REALTIME  VALID    EP INFO:
INST_PORT  INST_OK   INAME            ISTATUS     IMODE     DSC_SEQNO  DSC_CTL_NODE RTYPE     RSTAT    FSEQ            FLSN            CSEQ            CLSN            DW_STAT_FLAG          
5236       OK        GRP1_RW_01       OPEN        PRIMARY   0          0            REALTIME  VALID    5382            53870           5382            53870           NONE                  <<DATABASE GLOBAL INFO:>>
IP              MAL_DW_PORT  WTIME                WTYPE     WCTLSTAT  WSTATUS        INAME            INST_OK   N_EP  N_OK  ISTATUS     IMODE     DSC_STATUS     RTYPE     RSTAT    
10.0.3.104      5239         2021-03-09 15:24:38  GLOBAL    VALID     OPEN           GRP1_RW_02       OK        1     1     OPEN        STANDBY   DSC_OPEN       REALTIME  VALID    EP INFO:
INST_PORT  INST_OK   INAME            ISTATUS     IMODE     DSC_SEQNO  DSC_CTL_NODE RTYPE     RSTAT    FSEQ            FLSN            CSEQ            CLSN            DW_STAT_FLAG          
5236       OK        GRP1_RW_02       OPEN        STANDBY   0          0            REALTIME  VALID    5366            53870           5366            53870           NONE                  DATABASE(GRP1_RW_02) APPLY INFO FROM (GRP1_RW_01):
DSC_SEQNO[0], (ASEQ, SSEQ, KSEQ)[5382, 5382, 5382], (ALSN, SLSN, KLSN)[53870, 53870, 53870], N_TSK[0], TSK_MEM_USE[0]

在这里插入图片描述

三、数据同步测试

在主库上建立测试表,插入数据并提交。

[dmdba@dwp bin]$ rlwrap ./disql sysdba/dameng123Server[LOCALHOST:5236]:mode is primary, state is open
login used time: 5.960(ms)
disql V8
SQL> create table test_dw(id int, name varch(20));
create table test_dw(id int, name varch(20));
[-3719]:Error in line: 1
Invalid base class name[VARCH].
used time: 11.927(ms). Execute id is 0.
SQL> create table test_dw(id int, name varchar(20));
executed successfully
used time: 31.005(ms). Execute id is 4.
SQL> insert into test_dw values(1, 'xiaoli');
affect rows 1used time: 1.885(ms). Execute id is 5.
SQL> insert into test_dw values(2, 'xiaowang');
affect rows 1used time: 0.294(ms). Execute id is 6.
SQL> insert into test_dw values(2, 'xiaozhang');
affect rows 1used time: 0.414(ms). Execute id is 7.
SQL> commit;
executed successfully
used time: 3.159(ms). Execute id is 8.
SQL> select * from test_dw;LINEID     ID          NAME     
---------- ----------- ---------
1          1           xiaoli
2          2           xiaowang
3          2           xiaozhangused time: 1.890(ms). Execute id is 9.

在这里插入图片描述
登录备库,查看数据同步情况。
在这里插入图片描述
可以看到,数据已经同步到备库中。

这篇关于达梦DM8 DW实时主备集群搭建的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/945108

相关文章

服务器集群同步时间手记

1.时间服务器配置(必须root用户) (1)检查ntp是否安装 [root@node1 桌面]# rpm -qa|grep ntpntp-4.2.6p5-10.el6.centos.x86_64fontpackages-filesystem-1.41-1.1.el6.noarchntpdate-4.2.6p5-10.el6.centos.x86_64 (2)修改ntp配置文件 [r

HDFS—集群扩容及缩容

白名单:表示在白名单的主机IP地址可以,用来存储数据。 配置白名单步骤如下: 1)在NameNode节点的/opt/module/hadoop-3.1.4/etc/hadoop目录下分别创建whitelist 和blacklist文件 (1)创建白名单 [lytfly@hadoop102 hadoop]$ vim whitelist 在whitelist中添加如下主机名称,假如集群正常工作的节

Hadoop集群数据均衡之磁盘间数据均衡

生产环境,由于硬盘空间不足,往往需要增加一块硬盘。刚加载的硬盘没有数据时,可以执行磁盘数据均衡命令。(Hadoop3.x新特性) plan后面带的节点的名字必须是已经存在的,并且是需要均衡的节点。 如果节点不存在,会报如下错误: 如果节点只有一个硬盘的话,不会创建均衡计划: (1)生成均衡计划 hdfs diskbalancer -plan hadoop102 (2)执行均衡计划 hd

C#实战|大乐透选号器[6]:实现实时显示已选择的红蓝球数量

哈喽,你好啊,我是雷工。 关于大乐透选号器在前面已经记录了5篇笔记,这是第6篇; 接下来实现实时显示当前选中红球数量,蓝球数量; 以下为练习笔记。 01 效果演示 当选择和取消选择红球或蓝球时,在对应的位置显示实时已选择的红球、蓝球的数量; 02 标签名称 分别设置Label标签名称为:lblRedCount、lblBlueCount

搭建Kafka+zookeeper集群调度

前言 硬件环境 172.18.0.5        kafkazk1        Kafka+zookeeper                Kafka Broker集群 172.18.0.6        kafkazk2        Kafka+zookeeper                Kafka Broker集群 172.18.0.7        kafkazk3

【IPV6从入门到起飞】5-1 IPV6+Home Assistant(搭建基本环境)

【IPV6从入门到起飞】5-1 IPV6+Home Assistant #搭建基本环境 1 背景2 docker下载 hass3 创建容器4 浏览器访问 hass5 手机APP远程访问hass6 更多玩法 1 背景 既然电脑可以IPV6入站,手机流量可以访问IPV6网络的服务,为什么不在电脑搭建Home Assistant(hass),来控制你的设备呢?@智能家居 @万物互联

pico2 开发环境搭建-基于ubuntu

pico2 开发环境搭建-基于ubuntu 安装编译工具链下载sdk 和example编译example 安装编译工具链 sudo apt install cmake gcc-arm-none-eabi libnewlib-arm-none-eabi libstdc++-arm-none-eabi-newlib 注意cmake的版本,需要在3.17 以上 下载sdk 和ex

DM8数据库安装后配置

1 前言 在上篇文章中,我们已经成功将库装好。在安装完成后,为了能够更好地满足应用需求和保障系统的安全稳定运行,通常需要进行一些基本的配置。下面是一些常见的配置项: 数据库服务注册:默认包含14个功能模块,将这些模块注册成服务后,可以更好的启动和管理这些功能;基本的实例参数配置:契合应用场景和发挥系统的最大性能;备份:有备无患;… 2 注册实例服务 注册了实例服务后,可以使用系统服务管理,

一种改进的red5集群方案的应用、基于Red5服务器集群负载均衡调度算法研究

转自: 一种改进的red5集群方案的应用: http://wenku.baidu.com/link?url=jYQ1wNwHVBqJ-5XCYq0PRligp6Y5q6BYXyISUsF56My8DP8dc9CZ4pZvpPz1abxJn8fojMrL0IyfmMHStpvkotqC1RWlRMGnzVL1X4IPOa_  基于Red5服务器集群负载均衡调度算法研究 http://ww

828华为云征文|华为云Flexus X实例docker部署rancher并构建k8s集群

828华为云征文|华为云Flexus X实例docker部署rancher并构建k8s集群 华为云最近正在举办828 B2B企业节,Flexus X实例的促销力度非常大,特别适合那些对算力性能有高要求的小伙伴。如果你有自建MySQL、Redis、Nginx等服务的需求,一定不要错过这个机会。赶紧去看看吧! 什么是华为云Flexus X实例 华为云Flexus X实例云服务是新一代开箱即用、体