负载均衡(L B)、集群、LVS、DR、TUN、NAT、fullNAT

2024-02-19 08:38

本文主要是介绍负载均衡(L B)、集群、LVS、DR、TUN、NAT、fullNAT,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

负载均衡(Load Balance)
  • 提供故障转移,实现高可用
  • 分摊到多个操作单元上进行执行,例如Web服务器、 FTP服务器、企业关键应用服务器和其它关键任务服务器等,共同完成工作任务
  • 解决并发压力,提高应用处理性能,增加吞吐量,加强网络处理能力,提高网络的灵活性和可用性
  • 安全防护,及负载均衡设备上做一些过滤,黑白名单等处理
集群(cluster)
  • 集群是一组相互独立的、通过高速网络互联的计算机,它们构成了一个组,并以单一系统的模式加以管理。一个客户与集群相互作用时,集群像是一个独立的服务器。集群配置是用于提高可用性和可缩放性。集群系统的主要优点:高可扩展性、高可用性、高性能、高性价比。通过集群技术,可以在付出较低成本的情况下获得在性能、可靠性、灵活性方面的相对较高的收益,其任务调度则是集群系统中的核心技术。
负载均衡集群(LB:Load Balancing)
  • 负载均衡集群中有一个分发器或者叫调度器( Director),它处在多台服务器的上面,分发器根据内部所定义的规则或调度方式从下面的服务器群中选择一个以此来响应客户端发送的请求。
  • 基于 OSI 第四层: LVS( Linux Virtual Server)
  • 基于 OSI 第七层: nginx、 HAProxy
高可用集群(HA:High Availability)
  • 高可用集群是服务的可用性比较高,因为会有健康检查,所以当某一台服务器死机或挂掉后不会影响到我们的服务体验。其工作模式则是将一个具有故障的服务转交给一个正常工作的服务器,从而达到服务不会中断。一般来说我们集群中工作在前端(分发器)的服务器都会对我们的后端服务器做一个健康检查,如果发现我们服务器当机就不会对其在做转发。
  • 衡量标准:可用性=在线时间/(在线时间+故障处理时间)
    99%、 99.9%、 99.99%、 99.999%
高性能集群(HP:Hight Performance)
  • 当某一个任务量非常大的时,我们做一个集群共同来完成这一个任务。这种处理方式我们称为并行处理集群,并行处理集群是将大任务划分为小任务,分别进行处理的机制。一般这样的集群用来科学研究与大数据运算等方面的工作。
三种集群之间的区别
  • 负载均衡着重在于提供服务并发处理能力的集群
  • 高可用以提升服务在线的能力的集群
  • 高性能着重用于处理一个海量任务
四层负载均衡和七层负载均衡的区别
  • 四层的本质是转发
  • 七层的本质是代理
LVS模式
  • 工作在TCP/IP协议的四层,其转发是依赖于四层协议的特征进行转发,由于其转发要依赖于协议的特征进行转发,因此需要在内核的TCP/IP协议栈进行过滤筛选,这就需要在内核的模块来完成,而这样的过滤转发规则又是由管理员进行定义。LVS是两段式的架构设计,在内核空间中工作的是”ipvs”, 而在用户空间中工作的,用来定义集群服务规则的是”ipvsadm”。这就很容易想到iptables,而LVS正好工作在iptables的input链上。
LVS的组成
  • ipvsadm:用于管理集群服务的命令行工具,工作于Linux系统中的用户空间。
  • ipvs:IP虚拟服务器(IP Virtual Server),简写为IPVS,为lvs提供服务的内核模块,工作于内核空间 (相对于是框架,通过ipvsadm添加规则,来实现ipvs功能)。
内核状态
  • kernel 2.6.x 已內建 LVS 模组
  • kernel 2.4.x 需打补丁
  • rhel5 预设安裝即可使用 LVS 模组, 另以 yum 安裝 ipvsadm 套件
  • Linux内核2.4.23之前的内核中模块默认是不存在的,需要自己手动打补丁,然后把此模块编译进内核才可以使用此功能。
LVS中每个主机IP地址的定义
  • VIP:Director用来向客户端提供服务的IP地址,也是DNS解析的IP
  • RIP:集群节点(后台真正提供服务的服务器)所使用的IP地址
  • DIP:Director用来和RIP进行交互的IP地址
  • CIP:公网IP,客户端使用的IP
LVS的四种转发模式
  • DR:直接路由 Direct routing
  • TUN:IP隧道 IP tunneling
  • NAT:网络地址转换 Network address translation
  • FullNAT:网络地址转换
DR
  • client -> vs -> Rs ->client
  • 修改目标MAC
  • 请求由LVS接受,由真实提供服务的服务器(RealServer, RS)直接返回给用户,返回的时候不经过LVS。
  • 负载调度器中只负责调度请求,而服务器直接将响应返回给客户,可以极大地提高整个集群系统的吞吐量。
  • DR模式是性能最好的一种模式。
  • 调度器和服务器组都必须在物理上有一个网卡通过不分断的局域网相连。
TUN(隧道)
  • client ->vs ->Rs -> client
  • 各集群节点可以跨越不同的网络,不用在同一个VLAN
  • 调度器根据各个服务器的负载情况,动态地选择一台服务器,将请求报文封装在另一个 IP 报文中,再将封装后的 IP 报文转发给选出的服务器
  • 服务器收到报文后,先将报文解封获得原来目标地址为 VIP 的报文,服务器发现 VIP地址被配置在本 地的 IP 隧道设备上,所以就处理这个请求,然后根据路由表将响应报文直接返回给客户
NAT
  • client -> vs -> Rs ->vs ->client
  • 服务器可以运行任何支持 TCP/IP 的操作系统
  • 只需要一个 IP 地址配置在调度器上,服务器组可以用私有的 IP 地址。
  • 伸缩能力有限, 当服务器结点数目升到 20 时,调度器本身有可能成为系统的新瓶颈,因为在 VS/NAT 中请求和响应报文都需要通过负载调度器。
FullNAT
  • 抗攻击,跨vlan,需要重新编译内核
  • 解决了跨VLAN的问题。采用这种方式,LVS和RS的部署在VLAN上将不再有任何限制,大大提高了运维部署的便利性。
调度算法
  • LVS 的负载调度算法 在内核中的连接调度算法上,IPVS 已实现了以下八种调度算法
  • 轮叫调度(Round­Robin Scheduling )
    (1)轮叫的方式依次将请求调度不同的服务器
    (2)算法的优点是其简洁性,它无需记录当前所有连接的状态,所以它是一种无状态调度。
  • 加权轮叫调度(Weighted Round­Robin Scheduling )
    (1)解决服务器间性能不一的情况,
    (2)按权值的高低和轮叫方式分配请求到各服务器。权值高的服务器先收到的连接,权值高的服 务器比权值低的服务器处理更多的连接,相同权值的服务器处理相同数目的连接数。
  • 最小连接调度(Least­Connection Scheduling )
    (1)把新的连接请求分配到当前连接数最小的服务器。
    (2)一种动态调度算法,它通过服务器当前所活跃的连接数来估计服
    务 器的负载情况。调度器需要记录各个服务器已建立连接的数目,当一个请求被调度到某台服务器,其连接数加 1;当连接中止或超时,其连接数减一。
  • 加权最小连接调度(Weighted Least­Connection Scheduling)
    (1)最小连接调度的超集,各个服务器用相应的权值表示其处理性能。
    (2)服务器的缺省权值为1,系统管理员可以动态地设置服务器的权 值。
    (3)加权最小连接调度在调度新连接时尽可能使服务器的已建立连接数和其权值成比例。
  • 基于局部性的最少链接(Locality­Based Least Connections Scheduling )
    (1)简称LBLC算法,针对请求报文的目标 IP 地址的负载均衡调度,目前主要用于 Cache 集群系统,因为在 Cache 集群中 客户请求报文的目标 IP 地址是变化的。
    (2)假设任何后端服务器都可以处理任一请求,算法的设计目标是在服务器的负载基本平衡情况下,将相同目标IP地址的请求调度到同一台服务器,来提高各台服务器的访问局部性和主存 Cache 命中率,从而整个集群系统的处理能力。
    (3)LBLC调度算法先根据请求的目标IP地址找出该目标IP地址最近使用的服务器,若该服务器是可用的且没有超载,将请求发送到该服务器;若服务器不存在,或者该服务器超载且有服务器处于其一半的工作负载,则用 “ 最少链接 ” 的原则选出一个可用的服务器,将请求发送到该服务器。
  • 带复制的基于局部性最少链接(Locality­Based Least Connections with Replication Scheduling)
    (1)简称 LBLCR算法,也是针对目标 IP 地址的负载均衡,目前主要用于 Cache集群系统。它与 LBLC 算法的不同之处是它要维护从一个目标 IP 地址到一组服务器的映射。
    (2)LBLCR 算法先根据请求的目标 IP 地址找出该目标 IP 地址对应的服务器组;按 “ 最小连接 ” 原则从该服务器组中选出一台服务器,若服务器没有超载,将请求发送到该服务器;若服务器超载;则按 “ 最小连接 ” 原则从整个集群中选出一台服务器,将该服务器加入到服务器组中,将请求发送到该服务器。同时,当该服务器组有一段时间没有被修改,将最忙的服 务器从服务器组中删除,以降低复制的程度。
  • 目标地址散列调度(Destination Hashing Scheduling)
    (1)针对目标 IP 地址的负载均衡,但它是一种静态映射算法,通过一个散列(Hash)函数将一个目标 IP 地址映射到一台服务器。
    (2)目标地址散列调度算法先根据请求的目标 IP 地址,作为散列键(Hash Key)从静态分配的散列表找出对应的服务器,若该服务器是可用的且未超载,将请求发送到该服务器,否则返回空。
  • 源地址散列调度(Source Hashing Scheduling)
    (1)源地址散列调度(Source Hashing Scheduling)算法正好与目标地址散列调度算法相反
    (2)它根据请求的源 IP 地址,作为散列键(Hash Key)从静态分配的散列表找出对应的服务器,若该服务器是可用的且未超载,将请求发送到该服务器,否则返回空。
    (3)它采用的散列函数与目标地址散列调度算法 的相同。它的算法流程与目标地址散列调度算法的基本相似,除了将请求的目标 IP 地址换成请求的源 IP 地址。
    (4)在实际应用中,源地址散列调度和目标地址散列调度可以结合使用在防火墙集群中,它们可以保证整个系统的唯一出入口。

这篇关于负载均衡(L B)、集群、LVS、DR、TUN、NAT、fullNAT的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/724121

相关文章

服务器集群同步时间手记

1.时间服务器配置(必须root用户) (1)检查ntp是否安装 [root@node1 桌面]# rpm -qa|grep ntpntp-4.2.6p5-10.el6.centos.x86_64fontpackages-filesystem-1.41-1.1.el6.noarchntpdate-4.2.6p5-10.el6.centos.x86_64 (2)修改ntp配置文件 [r

HDFS—集群扩容及缩容

白名单:表示在白名单的主机IP地址可以,用来存储数据。 配置白名单步骤如下: 1)在NameNode节点的/opt/module/hadoop-3.1.4/etc/hadoop目录下分别创建whitelist 和blacklist文件 (1)创建白名单 [lytfly@hadoop102 hadoop]$ vim whitelist 在whitelist中添加如下主机名称,假如集群正常工作的节

Hadoop集群数据均衡之磁盘间数据均衡

生产环境,由于硬盘空间不足,往往需要增加一块硬盘。刚加载的硬盘没有数据时,可以执行磁盘数据均衡命令。(Hadoop3.x新特性) plan后面带的节点的名字必须是已经存在的,并且是需要均衡的节点。 如果节点不存在,会报如下错误: 如果节点只有一个硬盘的话,不会创建均衡计划: (1)生成均衡计划 hdfs diskbalancer -plan hadoop102 (2)执行均衡计划 hd

搭建Kafka+zookeeper集群调度

前言 硬件环境 172.18.0.5        kafkazk1        Kafka+zookeeper                Kafka Broker集群 172.18.0.6        kafkazk2        Kafka+zookeeper                Kafka Broker集群 172.18.0.7        kafkazk3

网络学习-eNSP配置NAT

NAT实现内网和外网互通 #给路由器接口设置IP地址模拟实验环境<Huawei>system-viewEnter system view, return user view with Ctrl+Z.[Huawei]undo info-center enableInfo: Information center is disabled.[Huawei]interface gigabit

一种改进的red5集群方案的应用、基于Red5服务器集群负载均衡调度算法研究

转自: 一种改进的red5集群方案的应用: http://wenku.baidu.com/link?url=jYQ1wNwHVBqJ-5XCYq0PRligp6Y5q6BYXyISUsF56My8DP8dc9CZ4pZvpPz1abxJn8fojMrL0IyfmMHStpvkotqC1RWlRMGnzVL1X4IPOa_  基于Red5服务器集群负载均衡调度算法研究 http://ww

828华为云征文|华为云Flexus X实例docker部署rancher并构建k8s集群

828华为云征文|华为云Flexus X实例docker部署rancher并构建k8s集群 华为云最近正在举办828 B2B企业节,Flexus X实例的促销力度非常大,特别适合那些对算力性能有高要求的小伙伴。如果你有自建MySQL、Redis、Nginx等服务的需求,一定不要错过这个机会。赶紧去看看吧! 什么是华为云Flexus X实例 华为云Flexus X实例云服务是新一代开箱即用、体

kubernetes集群部署Zabbix监控平台

一、zabbix介绍 1.zabbix简介 Zabbix是一个基于Web界面的分布式系统监控的企业级开源软件。可以监视各种系统与设备的参数,保障服务器及设备的安全运营。 2.zabbix特点 (1)安装与配置简单。 (2)可视化web管理界面。 (3)免费开源。 (4)支持中文。 (5)自动发现。 (6)分布式监控。 (7)实时绘图。 3.zabbix的主要功能

laravel框架实现redis分布式集群原理

在app/config/database.php中配置如下: 'redis' => array('cluster' => true,'default' => array('host' => '172.21.107.247','port' => 6379,),'redis1' => array('host' => '172.21.107.248','port' => 6379,),) 其中cl

VMware8实现高可用(HA)集群

陈科肇 =========== 操作系统:中标麒麟高级操作系统V6 x86-64 实现软件:中标麒麟高可用集群软件 ======================== 1.环境的规划与配置 硬件要求 服务器服务器至少需要 2 台,每台服务器至少需要 2 块网卡以做心跳与连接公网使用存储环境 建议使用一台 SAN/NAS/ISCSI 存储作为数据共享存储空间 软