Nginx负载均衡之动态更新upstream

2024-06-17 11:20

本文主要是介绍Nginx负载均衡之动态更新upstream,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

        Nginx 的配置是启动时一次性加载到内存中的,在实际的使用中,对 Nginx 服务器上游服务器组中节点的添加或移除仍需要重启或热加载 Nginx 进程。在 Nginx 的商业版本中,提供了 ngx_http_api_module 模块,可以通过 API 动态添加或移除上游服务器组中的节点。
        对于 Nginx 开源版本,通过 Nginx 的扩展版 OpenResty 及 Lua 脚本也可以实现上游服务器组中节点的动态操作,这里只使用 OpenResty 的 lua-upstream-nginx-module 模块简单演示节点的上下线状态动态修改的操作。该模块提供了 set_peer_down 指令,该指令可以对 upstream 的节点实现上下线的控制。
        由于该指令只支持 worker 级别的操作,为使得 Nginx 的所有 worker 都生效,此处通过编写 Lua 脚本与 lua-resty-upstream-healthcheck 模块做了简单的集成,利用 lua-resty-upstream-healthcheck 模块的共享内存机制将节点状态同步给其他工作进程,实现对 upstream 的节点状态的控制。
        首先在 OpenResty 的 lualib 目录下创建公用函数文件 api_func.lua,lualib/api_func.lua 内容如下:

local _M = { _VERSION = '1.0' }
local cjson = require "cjson"
local upstream = require "ngx.upstream"
local get_servers = upstream.get_servers
local get_primary_peers = upstream.get_primary_peers
local set_peer_down = upstream.set_peer_down# 分割字符串为table
local function split( str,reps )local resultStrList = {}string.gsub(str,"[^"..reps.."]+",function ( w )table.insert(resultStrList,w)end)return resultStrList
end# 获取server列表
local function get_args_srv( args )if not args["server"] thenngx.say("failed to get post args: ", err)return nilelseif type(args["server"]) ~= "table" thenserver_list=split(args["server"],",")elseserver_list=args["server"]endendreturn server_list
end# 获取节点在upstream中的顺序
local function get_peer_id(ups,server_name)local srvs = get_servers(ups)for i, srv in ipairs(srvs) do-- ngx.print(srv["name"])if srv["name"] == server_name thentarget_srv = srvtarget_srv["id"] = i-1breakendendreturn target_srv["id"]
end# 获取节点共享内存key
local function gen_peer_key(prefix, u, is_backup, id)if is_backup thenreturn prefix .. u .. ":b" .. idendreturn prefix .. u .. ":p" .. id
end# 设置节点状态
local function set_peer_down_globally(ups, is_backup, id, value,zone_define)local u = upslocal dict = zone_definelocal ok, err = set_peer_down(u, is_backup, id, value)if not ok thenngx.say(cjson.encode({code = "E002", msg = "failed to set peer down", data = err}))endlocal key = gen_peer_key("d:", u, is_backup, id)local ok, err = dict:set(key, value)if not ok thenngx.say(cjson.encode({code = "E003", msg = "failed to set peer down state", data = err}))end
end# 获取指定upstream的节点列表
function  _M.list_server(ups)local srvs, err = get_servers(ups)ngx.say(cjson.encode(srvs))
end# 设置节点状态
function  _M.set_server(ups,args,status,backup,zone_define)local server_list = get_args_srv(args)if server_list == nil thenngx.say(cjson.encode({code = "E001", msg = "no args",data = server_list}))return nilendfor _, s in pairs(server_list) dolocal peer_id = get_peer_id(ups,s)if status thenlocal key = gen_peer_key("nok:", ups, backup, peer_id)local ok, err = zone_define:set(key, 1)set_peer_down_globally(ups, backup, peer_id, true,zone_define)elselocal key = gen_peer_key("ok:", ups, backup, peer_id)local ok, err = zone_define:set(key, 0)set_peer_down_globally(ups, backup, peer_id, nil,zone_define)endendngx.say(cjson.encode({code = "D002", msg = "set peer is success",data = server_list}))
endreturn _M

        Nginx 配置文件 status.conf 的内容如下:

# 关闭socket错误日志
lua_socket_log_errors off;# 设置共享内存名称及大小
lua_shared_dict _healthcheck_zone 10m;init_worker_by_lua_block {local hc = require "resty.upstream.healthcheck"# 设置需要健康监测的upstreamlocal ups = {"foo.com","sslback"}# 遍历ups,绑定健康监测策略for k, v in pairs(ups) dolocal ok, err = hc.spawn_checker{shm = "_healthcheck_zone",      # 绑定lua_shared_dict定义的共享内存upstream = v,                   # 绑定upstream指令域type = "http",http_req = "GET / HTTP/1.0\r\nHost: foo.com\r\n\r\n",# 用以检测的raw格式http请求interval = 2000,                # 每2s检测一次timeout = 1000,                 # 检测请求超时时间为1sfall = 3,                       # 连续失败3次,被检测节点被置为DOWN状态rise = 2,                       # 连续成功2次,被检测节点被置为UP状态# 当健康检测请求返回的响应码为200或302时,被认# 为检测通过valid_statuses = {200, 302},concurrency = 10,               # 健康检测请求的并发数为10}if not ok thenngx.log(ngx.ERR, "failed to spawn health checker: ", err)returnendend
}upstream foo.com {server 192.168.2.145:8080;server 192.168.2.109:8080;server 127.0.0.1:12356 backup;
}upstream sslback {server 192.168.2.145:443;server 192.168.2.159:443;
}server {listen 18080;access_log  off;error_log off;# 健康检测状态页location = /healthcheck {access_log off;allow 127.0.0.1;allow 192.168.2.0/24;allow 192.168.101.0/24;deny all;default_type text/plain;content_by_lua_block {local hc = require "resty.upstream.healthcheck"ngx.say("Nginx Worker PID: ", ngx.worker.pid())ngx.print(hc.status_page())}}location = /ups_api {default_type  application/json;content_by_lua '# 获取URL参数local ups = ngx.req.get_uri_args()["ups"]local act = ngx.req.get_uri_args()["act"]if act == nil or ups == nil thenngx.say("usage: /ups_api?ups={name}&act=[down,up,list]")returnend# 引用api_func.lua脚本local api_fun = require "api_func"# 绑定共享内存_healthcheck_zonelocal zone_define=ngx.shared["_healthcheck_zone"]if act == "list" then# 获取指定upstream的节点列表api_fun.list_server(ups)elsengx.req.read_body()local args, err = ngx.req.get_post_args()if act == "up" then# 节点状态将设置为UPapi_fun.set_server(ups,args,false,false,zone_define)endif act == "down" then# 节点状态将设置为DOWNapi_fun.set_server(ups,args,true,false,zone_define)endend';}
}

        操作命令如下:

# 查看upstream foo.com的服务器列表
curl "http://127.0.0.1:18080/ups_api?act=list&ups=foo.com"# 将192.168.2.145:8080这个节点设置为DOWN状态
curl -X POST -d "server=192.168.2.145:8080" "http://127.0.0.1:18080/ups_api?act= down&ups=foo.com"# 将192.168.2.145:8080这个节点设置为UP状态
curl -X POST -d "server=192.168.2.145:8080" "http://127.0.0.1:18080/ups_api?act= up&ups=foo.com"

 

 

这篇关于Nginx负载均衡之动态更新upstream的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1069301

相关文章

使用Nginx来共享文件的详细教程

《使用Nginx来共享文件的详细教程》有时我们想共享电脑上的某些文件,一个比较方便的做法是,开一个HTTP服务,指向文件所在的目录,这次我们用nginx来实现这个需求,本文将通过代码示例一步步教你使用... 在本教程中,我们将向您展示如何使用开源 Web 服务器 Nginx 设置文件共享服务器步骤 0 —

Ubuntu 24.04 LTS怎么关闭 Ubuntu Pro 更新提示弹窗?

《Ubuntu24.04LTS怎么关闭UbuntuPro更新提示弹窗?》Ubuntu每次开机都会弹窗提示安全更新,设置里最多只能取消自动下载,自动更新,但无法做到直接让自动更新的弹窗不出现,... 如果你正在使用 Ubuntu 24.04 LTS,可能会注意到——在使用「软件更新器」或运行 APT 命令时,

如何用Python绘制简易动态圣诞树

《如何用Python绘制简易动态圣诞树》这篇文章主要给大家介绍了关于如何用Python绘制简易动态圣诞树,文中讲解了如何通过编写代码来实现特定的效果,包括代码的编写技巧和效果的展示,需要的朋友可以参考... 目录代码:效果:总结 代码:import randomimport timefrom math

一文带你搞懂Nginx中的配置文件

《一文带你搞懂Nginx中的配置文件》Nginx(发音为“engine-x”)是一款高性能的Web服务器、反向代理服务器和负载均衡器,广泛应用于全球各类网站和应用中,下面就跟随小编一起来了解下如何... 目录摘要一、Nginx 配置文件结构概述二、全局配置(Global Configuration)1. w

Java中JSON字符串反序列化(动态泛型)

《Java中JSON字符串反序列化(动态泛型)》文章讨论了在定时任务中使用反射调用目标对象时处理动态参数的问题,通过将方法参数存储为JSON字符串并进行反序列化,可以实现动态调用,然而,这种方式容易导... 需求:定时任务扫描,反射调用目标对象,但是,方法的传参不是固定的。方案一:将方法参数存成jsON字

若依部署Nginx和Tomcat全过程

《若依部署Nginx和Tomcat全过程》文章总结了两种部署方法:Nginx部署和Tomcat部署,Nginx部署包括打包、将dist文件拉到指定目录、配置nginx.conf等步骤,Tomcat部署... 目录Nginx部署后端部署Tomcat部署出现问题:点击刷新404总结Nginx部署第一步:打包

Nginx、Tomcat等项目部署问题以及解决流程

《Nginx、Tomcat等项目部署问题以及解决流程》本文总结了项目部署中常见的four类问题及其解决方法:Nginx未按预期显示结果、端口未开启、日志分析的重要性以及开发环境与生产环境运行结果不一致... 目录前言1. Nginx部署后未按预期显示结果1.1 查看Nginx的启动情况1.2 解决启动失败的

tomcat在nginx中的配置方式

《tomcat在nginx中的配置方式》文章介绍了如何在Linux系统上安装和配置Tomcat,并通过Nginx进行代理,首先,下载并解压Tomcat压缩包,然后启动Tomcat并查看日志,接着,配置... 目录一、下载安装tomcat二、启动tomcat三、配置nginx总结提示:文章写完后,目录可以自动

.NET利用C#字节流动态操作Excel文件

《.NET利用C#字节流动态操作Excel文件》在.NET开发中,通过字节流动态操作Excel文件提供了一种高效且灵活的方式处理数据,本文将演示如何在.NET平台使用C#通过字节流创建,读取,编辑及保... 目录用C#创建并保存Excel工作簿为字节流用C#通过字节流直接读取Excel文件数据用C#通过字节

Hadoop集群数据均衡之磁盘间数据均衡

生产环境,由于硬盘空间不足,往往需要增加一块硬盘。刚加载的硬盘没有数据时,可以执行磁盘数据均衡命令。(Hadoop3.x新特性) plan后面带的节点的名字必须是已经存在的,并且是需要均衡的节点。 如果节点不存在,会报如下错误: 如果节点只有一个硬盘的话,不会创建均衡计划: (1)生成均衡计划 hdfs diskbalancer -plan hadoop102 (2)执行均衡计划 hd