集群专题
服务器集群同步时间手记
1.时间服务器配置（必须root用户） （1）检查ntp是否安装 [root@node1 桌面]# rpm -qa|grep ntpntp-4.2.6p5-10.el6.centos.x86_64fontpackages-filesystem-1.41-1.1.el6.noarchntpdate-4.2.6p5-10.el6.centos.x86_64 （2）修改ntp配置文件 [r
HDFS—集群扩容及缩容
白名单：表示在白名单的主机IP地址可以，用来存储数据。 配置白名单步骤如下： 1）在NameNode节点的/opt/module/hadoop-3.1.4/etc/hadoop目录下分别创建whitelist 和blacklist文件 （1）创建白名单 [lytfly@hadoop102 hadoop]$ vim whitelist 在whitelist中添加如下主机名称，假如集群正常工作的节
Hadoop集群数据均衡之磁盘间数据均衡
生产环境，由于硬盘空间不足，往往需要增加一块硬盘。刚加载的硬盘没有数据时，可以执行磁盘数据均衡命令。（Hadoop3.x新特性） plan后面带的节点的名字必须是已经存在的，并且是需要均衡的节点。 如果节点不存在，会报如下错误： 如果节点只有一个硬盘的话，不会创建均衡计划： （1）生成均衡计划 hdfs diskbalancer -plan hadoop102 （2）执行均衡计划 hd
搭建Kafka+zookeeper集群调度
前言 硬件环境 172.18.0.5 kafkazk1 Kafka+zookeeper Kafka Broker集群 172.18.0.6 kafkazk2 Kafka+zookeeper Kafka Broker集群 172.18.0.7 kafkazk3
一种改进的red5集群方案的应用、基于Red5服务器集群负载均衡调度算法研究
转自： 一种改进的red5集群方案的应用： http://wenku.baidu.com/link?url=jYQ1wNwHVBqJ-5XCYq0PRligp6Y5q6BYXyISUsF56My8DP8dc9CZ4pZvpPz1abxJn8fojMrL0IyfmMHStpvkotqC1RWlRMGnzVL1X4IPOa_ 基于Red5服务器集群负载均衡调度算法研究 http://ww
828华为云征文｜华为云Flexus X实例docker部署rancher并构建k8s集群
828华为云征文｜华为云Flexus X实例docker部署rancher并构建k8s集群 华为云最近正在举办828 B2B企业节，Flexus X实例的促销力度非常大，特别适合那些对算力性能有高要求的小伙伴。如果你有自建MySQL、Redis、Nginx等服务的需求，一定不要错过这个机会。赶紧去看看吧！ 什么是华为云Flexus X实例 华为云Flexus X实例云服务是新一代开箱即用、体
kubernetes集群部署Zabbix监控平台
一、zabbix介绍 1.zabbix简介 Zabbix是一个基于Web界面的分布式系统监控的企业级开源软件。可以监视各种系统与设备的参数，保障服务器及设备的安全运营。 2.zabbix特点 （1）安装与配置简单。 （2）可视化web管理界面。 （3）免费开源。 （4）支持中文。 （5）自动发现。 （6）分布式监控。 （7）实时绘图。 3.zabbix的主要功能
laravel框架实现redis分布式集群原理
在app/config/database.php中配置如下： 'redis' => array('cluster' => true,'default' => array('host' => '172.21.107.247','port' => 6379,),'redis1' => array('host' => '172.21.107.248','port' => 6379,),) 其中cl
VMware8实现高可用(HA)集群
陈科肇 =========== 操作系统：中标麒麟高级操作系统V6 x86-64 实现软件：中标麒麟高可用集群软件 ======================== 1.环境的规划与配置 硬件要求 服务器服务器至少需要 2 台，每台服务器至少需要 2 块网卡以做心跳与连接公网使用存储环境 建议使用一台 SAN/NAS/ISCSI 存储作为数据共享存储空间 软
用Cri-O，Sealos CLI，Kubeadm方式部署K8s高可用集群
3.6 Cri-O方式部署K8s集群 注意：基于Kubernetes基础环境 3.6.1 所有节点安装配置cri-o [root@k8s-all ~]# VERSION=1.28[root@k8s-all ~]# curl -L -o /etc/yum.repos.d/devel:kubic:libcontainers:stable.repo https://download.opensu
Redis-主从集群
主从架构 单节点Redis的并发能力是有上限的，要进一步提高Redis的并发能力，就需要搭建主从集群，实现读写分离。 主从数据同步原理 全量同步 主从第一次建立连接时，会执行全量同步，将master节点的所有数据都拷贝给slave节点，流程： 判断是否是第一次同步，如果是，返回版本信息（replication id 和offset），将salve节点的版本信息变为master的
Zookeeper集群是如何升级到新版本的
方案1：复用老数据方案 这是经过实践的升级方案，该方案是复用旧版本的数据，zk集群拓扑，配置文件都不变，只是启动的程序为最新的版本。 参考文章： Zookeeper集群是如何升级到新版本的 方案2：重新建立数据方案 该方案的思路是：先停掉一台follower的机器上的服务，然后加入一个新版本的zk(zk的数据目录是空的)，然后启动新zk，之后新zk会把旧集群中的数据同步过来。之后再操作另
集群环境下为雪花算法生成全局唯一机器ID策略
雪花算法是生成数据id非常好的一种方式，机器id是雪花算法不可分割的一部分。但是对于集群应用，让不同的机器自动产生不同的机器id传统做法就是针对每一个机器进行单独配置，但这样做不利于集群水平扩展，且操作过程非常复杂，所以每一个机器在集群环境下是一个头疼的问题。现在借助spring+redis，给出一种策略，支持随意水平扩展，肥肠好用。 大致策略分为4步： 1.对机器ip进行hash,对某一个（大于
Kubernetes高可用集群搭建(kubeadm)
1 Kubernetes高可用集群介绍 前面已经介绍了Kubernetes的集群部署，但是都只是介绍的单master节点的情况，由于单master节点的可靠性不高，不适合实际的生产环境，此处介绍如何实现多master节点的高可用集群的搭建。 2 安装要求 一台或多台机器，操作系统CentOS7.x-x86_64硬件配置：2G或更多ARM，2个CPU或更多CPU，硬盘20G及以上集群中所有机器
【Redis】Redis 集群搭建与管理: 原理、实现与操作
目录 集群 (Cluster)基本概念数据分片算法哈希求余⼀致性哈希算法哈希槽分区算法 (Redis 使⽤) 集群搭建 (基于 docker)第⼀步: 创建⽬录和配置第⼆步: 编写 docker-compose.yml第三步: 启动容器第四步: 构建集群 主节点宕机演⽰效果处理流程1)故障判定2)故障迁移 集群扩容第⼀步: 把新的主节点加⼊到集群第⼆步: 重新分配 slots第三步: 给新的
828华为云征文｜基于华为云Flexus X实例搭建Nginx集群负载均衡
目录 前言 一、Flexus云服务器X介绍 1.1 Flexus云服务器X实例简介 1.2 Flexus X实例购买 1.3 登录服务器 三、Springboot集群服务 3.1 部署9901节点服务 3.2 部署9902节点服务 四、Nginx负载均衡配置 五、集群负载调用测试 5.1 负载调用9901端口 5.2 负载调用9901端口 总结 前言 华为云Flexus X实例凭借其
如何使用Prometheus与Grafana监控Kubernetes集群
使用Prometheus与Grafana监控Kubernetes集群 一、引言 Kubernetes作为目前最受欢迎的容器编排工具，已经成为现代应用部署和管理的核心平台。然而，随着集群规模的扩大和复杂性的增加，对其进行有效的监控变得至关重要。Prometheus与Grafana是广泛使用的开源监控和可视化工具，能够提供强大的监控、报警和数据可视化功能。本文将详细介绍如何使用Prometheus
使用Docker快速启动Nacos集群
Nacos 是一个易于使用的平台，用于动态服务发现、配置管理和服务管理。它帮助您在云环境中快速构建云原生应用程序，支持服务的注册与发现、动态配置更新等功能。在本文中，我们将介绍如何使用 Docker 快速启动 Nacos 集群。 为什么使用 Docker 启动 Nacos？ 快速部署：Docker 容器可以在几秒钟内启动，加快了部署速度。环境一致性：容器化确保了开发、测试和生产环境之间的一致性
Redis Sentinel 深度解析：构建高可用性 Redis 集群
Redis Sentinel 深度解析：构建高可用性 Redis 集群 一 . 基本概念1.1 相关名词解释1.2 如何人工恢复主节点故障 ?1.3 哨兵自动恢复主节点故障 二 . 哨兵的安装部署2.1 安装 docker 和 docker-compose2.2 搭建 Redis 的哨兵环境2.2.1 编排 Redis 的主从节点2.2.2 编排 redis-sentinel 节点2.2.3
单机部署Redis集群
文章目录 Redis集群1.单机安装Redis2.Redis主从集群2.1.集群结构2.2.准备实例和配置2.3.启动2.4.开启主从关系2.5.测试 3.搭建哨兵集群3.1.集群结构3.2.准备实例和配置3.3.启动3.4.测试 4.搭建分片集群4.1.集群结构4.2.准备实例和配置4.3.启动4.4.创建集群4.5.测试 Redis集群 本章是基于CentOS7下的Redi
Kubernetes集群安装、配置glusterfs文件系统
环境介绍： 3台Centos 7.4系统节点，已经部署好Kubernetes，同时复用这3台机器作为gluster存储节点： hostIPK8s roleg1-nasp12.12.10.11master + nodeg3-nasp12.12.10.13nodeg4-nasp12.12.10.14node 安装、配置glusterfs： 在物理主机上采用yum安装的方式，步骤如下： 1
mysql mgr 集群部署 单主模式和多主模式
mysql mgr集群部署 单主模式和多主模式 MGR介绍 MySQL Group Replication（MGR：mysql组复制技术）是MySQL官方在5.7.17版本引进的一个数据库高可用与高扩展的解决方案，以插件形式提供。 **MGR基于分布式paxos协议，实现组复制，在分布式中保证数据一致性和原子性，且具有容错率的一致性算法。**内置故障检测和自动选主功能，只要不是集群中的大多数节
Elastic Stack--ES集群加密及Kibana的RBAC实战
前言：本博客仅作记录学习使用，部分图片出自网络，如有侵犯您的权益，请联系删除 学习B站博主教程笔记： 最新版适合自学的ElasticStack全套视频（Elk零基础入门到精通教程）Linux运维必备—ElasticSearch+Logstash+Kibana精讲_哔哩哔哩_bilibilihttps://www.bilibili.com/video/BV1VMW3e6Ezk/?sp
k8s集群本地搭建,使用gitlab、harbor、jenkens、cicd来实现devops自动化构建
k8s集群本地搭建 准备:一台windows即可我windows内存是32gb的,6核,每核2线程全程使用终端 ssh命令操作.我是直接用的mac点操作windows,然后windows连接虚拟机即可.虚拟机记得改网卡,这样才能保证以后ip不变.介绍:k8s集群本地搭建(1master、2node)k8x运用devops来自动化构建服务(gitlab、harbor、jenkens、cicd)简介
