pg数据库的热备

2024-05-15 08:52
文章标签 数据库 pg 热备

本文主要是介绍pg数据库的热备,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Pg数据库主从复制

前言:公司的一台服务器因为断电导致系统损坏,经过3天的抢修,将服务器和数据恢复。为了避免数据的丢失,先将数据备份,并进行高可用。

​ 采用技术:keepalived+pg

​ 后期并实现zabbix对pg的端口检测和好可用的检测

​ 实验环境:

​ pg主库: centos7.9:192.168.60.50

​ pg从库: centos7.9: 192.168.60.164

​ 实际生产是:

​ 一台Centos7.9 作为主库

​ 一台ubuntu20.04 作为从库

​ 以实验测试环境为主:

安装pg数据库

该实验docker为主,采用docker-compose安装

[root@localhost pg]# cat docker-compose.yml 
version: '3.7'
services:postgis:image: postgis/postgis:12-3.2 container_name: postgisrestart: alwaysenvironment:# POSTGRES_DB: postgresPOSTGRES_USER: postgresPOSTGRES_PASSWORD: 123456ALLOW_IP_RANGE: 0.0.0.0/0ports:- "5436:5432"volumes:- ./postgis/pg_data/data/:/var/lib/postgresql/data/  # 将本地 data 目录映射到容器内的 /var/lib/postgresql/data - /etc/localtime:/etc/localtime:ro

对挂载目录赋权限

useradd postgres
chown postgres:postgres  -R postgis/
chmod +x postgis/ -R

修改完切记要重启容器

创建主从复制用户(流复制)

root@d94353c96edf:/# psql -Upostgres 
psql (12.12 (Debian 12.12-1.pgdg110+1))
Type "help" for help.
postgres=#CREATE ROLE replica login replication encrypted password 'replica';

执行创建sql语句,第三列是上面创建的用于复制的用户名,第四列为从节点ip地址

CREATE ROLE replica login replication encrypted password 'replica';

修改./data/pg_hba.conf文件


允许从库IP可以通过repl用户连接主库
# local         DATABASE  USER  METHOD  [OPTIONS]host    replication     replica         192.168.60/164/24      md5

修改主库上的配置文件(postgresql.conf文件)

listen_addresses = '*'   #允许数据库监听所有IP地址,即可以通过任何网络接口连接。
archive_mode = on      #启用归档模式,允许数据库将 WAL(Write-Ahead Logging)日志文件存档。
archive_command = '/bin/date'    #只是将日期打印出来,取消了真正的归档。
wal_level = replica    #设置为 replica,表示开启了逻辑复制以支持热备。
max_wal_senders = 10    #设置能够连接到主服务器进行 WAL 复制的最大连接数。这是为了支持有多个从服务器的场景。
wal_keep_size = 1024    #设置 WAL 文件的保留大小,以兆字节(M)为单位。超过这个大小的日志文件将不会被删除,以便后续从备份中进行还原。
wal_sender_timeout = 60s #设置 WAL 发送者(主服务器)发送数据的超时时间,这里是60秒。
max_connections = 100    #设置数据库允许的最大连接数。在这里要注意,从库的最大连接数必须大于主库的连接数,确保从库可以处理主库发送的所有连接。
#退出容器,并重启
docker restart postgres

从库设置

启动从库先不要挂载目录

切记

进入到从库postgres的容器内配置流复制

 
docker exec -it postgis bash
#删除数据,并将主节点数据同步过来
rm -rf /var/lib/postgresql/data/*
#使用pg_basebackup命令备份主数据库中的数据
pg_basebackup -h 192.168.60.50 -p 5436 -U replica --password -X stream -Fp --progress -D /var/lib/postgresql/data/ -R;

#数据同步后容器会关闭。再启动即可 docker start postgres

将数据目录copy出来后在挂载目录

mkdir -p ./postgis/pg_data/cd ./postgis/pg_data/
docker cp postgis:/var/lib/postgresql/data/ ./

配置权限

useradd postgres
chown postgres:postgres  -R postgis/
chmod +x postgis/ -R

打开挂载目录在进行挂载

打开注释的挂载目录即可

修改从库的配置

#创建文件vi /var/lib/postgresql/data/standby.signal  添加下面这行内容声明从库
standby_mode = 'on'
#修改文件vi /var/lib/postgresql/data/postgresql.conf 修改以下配置
wal_level = replica   # 设置 WAL 日志的级别为 replica,表示开启逻辑复制以支持热备。
primary_conninfo = 'host=192.168.60.50 port=5236 user=replica password=replica'   # 配置主库ip地址以及端口号,以及用于复制的用户名和密码	
hot_standby = on                     # 在恢复期间允许查询。这是在流复制过程中,从库在进行 WAL 日志恢复的同时允许查询读取。
recovery_target_timeline = latest    # 设置恢复的目标时间线。在这里,设置为 latest 表示从库将一直尝试连接到主库的最新时间线上。
max_connections = 120  				#必须大于主节点的连接数。这确保从库可以处理主库发送的所有连接请求。
#重启从库

查看主从状态

#进入主节点容器,
docker exec -it postgis bash
[root@localhost data]# docker exec -it postgis bash
root@af2d730a2610:/# psql -U postgres
psql (12.12 (Debian 12.12-1.pgdg110+1))
Type "help" for help.postgres=# select client_addr,sync_state from pg_stat_replication;client_addr   | sync_state 
----------------+------------192.168.60.164 | async
(1 row)postgres=# 

在主库创建一个库

create database test;

从库查看

postgres=# .\lList of databasesName       |  Owner   | Encoding |  Collate   |   Ctype    |   Access privileges   
------------------+----------+----------+------------+------------+-----------------------postgres         | postgres | UTF8     | en_US.utf8 | en_US.utf8 | template0        | postgres | UTF8     | en_US.utf8 | en_US.utf8 | =c/postgres          +|          |          |            |            | postgres=CTc/postgrestemplate1        | postgres | UTF8     | en_US.utf8 | en_US.utf8 | =c/postgres          +|          |          |            |            | postgres=CTc/postgrestemplate_postgis | postgres | UTF8     | en_US.utf8 | en_US.utf8 | test             | postgres | UTF8     | en_US.utf8 | en_US.utf8 | 
(5 rows)postgres-# 

同步成功

下一阶段在生产迁移,并通过keepalived做到高可用

并且在zabbix进行数据库端口的监控

这篇关于pg数据库的热备的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/991369

相关文章

Spring Security基于数据库验证流程详解

Spring Security 校验流程图 相关解释说明(认真看哦) AbstractAuthenticationProcessingFilter 抽象类 /*** 调用 #requiresAuthentication(HttpServletRequest, HttpServletResponse) 决定是否需要进行验证操作。* 如果需要验证,则会调用 #attemptAuthentica

MySQL数据库宕机,启动不起来,教你一招搞定!

作者介绍:老苏,10余年DBA工作运维经验,擅长Oracle、MySQL、PG、Mongodb数据库运维(如安装迁移,性能优化、故障应急处理等)公众号:老苏畅谈运维欢迎关注本人公众号,更多精彩与您分享。 MySQL数据库宕机,数据页损坏问题,启动不起来,该如何排查和解决,本文将为你说明具体的排查过程。 查看MySQL error日志 查看 MySQL error日志,排查哪个表(表空间

深入理解数据库的 4NF:多值依赖与消除数据异常

在数据库设计中, "范式" 是一个常常被提到的重要概念。许多初学者在学习数据库设计时,经常听到第一范式(1NF)、第二范式(2NF)、第三范式(3NF)以及 BCNF(Boyce-Codd范式)。这些范式都旨在通过消除数据冗余和异常来优化数据库结构。然而,当我们谈到 4NF(第四范式)时,事情变得更加复杂。本文将带你深入了解 多值依赖 和 4NF,帮助你在数据库设计中消除更高级别的异常。 什么是

DM8数据库安装后配置

1 前言 在上篇文章中,我们已经成功将库装好。在安装完成后,为了能够更好地满足应用需求和保障系统的安全稳定运行,通常需要进行一些基本的配置。下面是一些常见的配置项: 数据库服务注册:默认包含14个功能模块,将这些模块注册成服务后,可以更好的启动和管理这些功能;基本的实例参数配置:契合应用场景和发挥系统的最大性能;备份:有备无患;… 2 注册实例服务 注册了实例服务后,可以使用系统服务管理,

速了解MySQL 数据库不同存储引擎

快速了解MySQL 数据库不同存储引擎 MySQL 提供了多种存储引擎,每种存储引擎都有其特定的特性和适用场景。了解这些存储引擎的特性,有助于在设计数据库时做出合理的选择。以下是 MySQL 中几种常用存储引擎的详细介绍。 1. InnoDB 特点: 事务支持:InnoDB 是一个支持 ACID(原子性、一致性、隔离性、持久性)事务的存储引擎。行级锁:使用行级锁来提高并发性,减少锁竞争

开源分布式数据库中间件

转自:https://www.csdn.net/article/2015-07-16/2825228 MyCat:开源分布式数据库中间件 为什么需要MyCat? 虽然云计算时代,传统数据库存在着先天性的弊端,但是NoSQL数据库又无法将其替代。如果传统数据易于扩展,可切分,就可以避免单机(单库)的性能缺陷。 MyCat的目标就是:低成本地将现有的单机数据库和应用平滑迁移到“云”端

ORACLE 11g 创建数据库时 Enterprise Manager配置失败的解决办法 无法打开OEM的解决办法

在win7 64位系统下安装oracle11g,在使用Database configuration Assistant创建数据库时,在创建到85%的时候报错,错误如下: 解决办法: 在listener.ora中增加对BlueAeri-PC或ip地址的侦听,具体步骤如下: 1.启动Net Manager,在“监听程序”--Listener下添加一个地址,主机名写计

MyBatis 切换不同的类型数据库方案

下属案例例当前结合SpringBoot 配置进行讲解。 背景: 实现一个工程里面在部署阶段支持切换不同类型数据库支持。 方案一 数据源配置 关键代码(是什么数据库,该怎么配就怎么配) spring:datasource:name: test# 使用druid数据源type: com.alibaba.druid.pool.DruidDataSource# @需要修改 数据库连接及驱动u

CentOS下mysql数据库data目录迁移

https://my.oschina.net/u/873762/blog/180388        公司新上线一个资讯网站,独立主机,raid5,lamp架构。由于资讯网是面向小行业,初步估计一两年内访问量压力不大,故,在做服务器系统搭建的时候,只是简单分出一个独立的data区作为数据库和网站程序的专区,其他按照linux的默认分区。apache,mysql,php均使用yum安装(也尝试

Java基础回顾系列-第九天-数据库编程

Java基础回顾系列-第九天-数据库编程 数据库简介工具包java.sql API 内容与数据库建立连接执行SQL语句数据库检索和更新查询结果SQL类型对应Java类型映射元数据异常 API方法DriverManagerConnectionStatementPreparedStatementCallableStatementResultSetjava.sql.Date批处理、存储过程、事务