Nginx负载均衡之动态更新upstream

2024-06-17 11:20

本文主要是介绍Nginx负载均衡之动态更新upstream,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

        Nginx 的配置是启动时一次性加载到内存中的,在实际的使用中,对 Nginx 服务器上游服务器组中节点的添加或移除仍需要重启或热加载 Nginx 进程。在 Nginx 的商业版本中,提供了 ngx_http_api_module 模块,可以通过 API 动态添加或移除上游服务器组中的节点。
        对于 Nginx 开源版本,通过 Nginx 的扩展版 OpenResty 及 Lua 脚本也可以实现上游服务器组中节点的动态操作,这里只使用 OpenResty 的 lua-upstream-nginx-module 模块简单演示节点的上下线状态动态修改的操作。该模块提供了 set_peer_down 指令,该指令可以对 upstream 的节点实现上下线的控制。
        由于该指令只支持 worker 级别的操作,为使得 Nginx 的所有 worker 都生效,此处通过编写 Lua 脚本与 lua-resty-upstream-healthcheck 模块做了简单的集成,利用 lua-resty-upstream-healthcheck 模块的共享内存机制将节点状态同步给其他工作进程,实现对 upstream 的节点状态的控制。
        首先在 OpenResty 的 lualib 目录下创建公用函数文件 api_func.lua,lualib/api_func.lua 内容如下:

local _M = { _VERSION = '1.0' }
local cjson = require "cjson"
local upstream = require "ngx.upstream"
local get_servers = upstream.get_servers
local get_primary_peers = upstream.get_primary_peers
local set_peer_down = upstream.set_peer_down# 分割字符串为table
local function split( str,reps )local resultStrList = {}string.gsub(str,"[^"..reps.."]+",function ( w )table.insert(resultStrList,w)end)return resultStrList
end# 获取server列表
local function get_args_srv( args )if not args["server"] thenngx.say("failed to get post args: ", err)return nilelseif type(args["server"]) ~= "table" thenserver_list=split(args["server"],",")elseserver_list=args["server"]endendreturn server_list
end# 获取节点在upstream中的顺序
local function get_peer_id(ups,server_name)local srvs = get_servers(ups)for i, srv in ipairs(srvs) do-- ngx.print(srv["name"])if srv["name"] == server_name thentarget_srv = srvtarget_srv["id"] = i-1breakendendreturn target_srv["id"]
end# 获取节点共享内存key
local function gen_peer_key(prefix, u, is_backup, id)if is_backup thenreturn prefix .. u .. ":b" .. idendreturn prefix .. u .. ":p" .. id
end# 设置节点状态
local function set_peer_down_globally(ups, is_backup, id, value,zone_define)local u = upslocal dict = zone_definelocal ok, err = set_peer_down(u, is_backup, id, value)if not ok thenngx.say(cjson.encode({code = "E002", msg = "failed to set peer down", data = err}))endlocal key = gen_peer_key("d:", u, is_backup, id)local ok, err = dict:set(key, value)if not ok thenngx.say(cjson.encode({code = "E003", msg = "failed to set peer down state", data = err}))end
end# 获取指定upstream的节点列表
function  _M.list_server(ups)local srvs, err = get_servers(ups)ngx.say(cjson.encode(srvs))
end# 设置节点状态
function  _M.set_server(ups,args,status,backup,zone_define)local server_list = get_args_srv(args)if server_list == nil thenngx.say(cjson.encode({code = "E001", msg = "no args",data = server_list}))return nilendfor _, s in pairs(server_list) dolocal peer_id = get_peer_id(ups,s)if status thenlocal key = gen_peer_key("nok:", ups, backup, peer_id)local ok, err = zone_define:set(key, 1)set_peer_down_globally(ups, backup, peer_id, true,zone_define)elselocal key = gen_peer_key("ok:", ups, backup, peer_id)local ok, err = zone_define:set(key, 0)set_peer_down_globally(ups, backup, peer_id, nil,zone_define)endendngx.say(cjson.encode({code = "D002", msg = "set peer is success",data = server_list}))
endreturn _M

        Nginx 配置文件 status.conf 的内容如下:

# 关闭socket错误日志
lua_socket_log_errors off;# 设置共享内存名称及大小
lua_shared_dict _healthcheck_zone 10m;init_worker_by_lua_block {local hc = require "resty.upstream.healthcheck"# 设置需要健康监测的upstreamlocal ups = {"foo.com","sslback"}# 遍历ups,绑定健康监测策略for k, v in pairs(ups) dolocal ok, err = hc.spawn_checker{shm = "_healthcheck_zone",      # 绑定lua_shared_dict定义的共享内存upstream = v,                   # 绑定upstream指令域type = "http",http_req = "GET / HTTP/1.0\r\nHost: foo.com\r\n\r\n",# 用以检测的raw格式http请求interval = 2000,                # 每2s检测一次timeout = 1000,                 # 检测请求超时时间为1sfall = 3,                       # 连续失败3次,被检测节点被置为DOWN状态rise = 2,                       # 连续成功2次,被检测节点被置为UP状态# 当健康检测请求返回的响应码为200或302时,被认# 为检测通过valid_statuses = {200, 302},concurrency = 10,               # 健康检测请求的并发数为10}if not ok thenngx.log(ngx.ERR, "failed to spawn health checker: ", err)returnendend
}upstream foo.com {server 192.168.2.145:8080;server 192.168.2.109:8080;server 127.0.0.1:12356 backup;
}upstream sslback {server 192.168.2.145:443;server 192.168.2.159:443;
}server {listen 18080;access_log  off;error_log off;# 健康检测状态页location = /healthcheck {access_log off;allow 127.0.0.1;allow 192.168.2.0/24;allow 192.168.101.0/24;deny all;default_type text/plain;content_by_lua_block {local hc = require "resty.upstream.healthcheck"ngx.say("Nginx Worker PID: ", ngx.worker.pid())ngx.print(hc.status_page())}}location = /ups_api {default_type  application/json;content_by_lua '# 获取URL参数local ups = ngx.req.get_uri_args()["ups"]local act = ngx.req.get_uri_args()["act"]if act == nil or ups == nil thenngx.say("usage: /ups_api?ups={name}&act=[down,up,list]")returnend# 引用api_func.lua脚本local api_fun = require "api_func"# 绑定共享内存_healthcheck_zonelocal zone_define=ngx.shared["_healthcheck_zone"]if act == "list" then# 获取指定upstream的节点列表api_fun.list_server(ups)elsengx.req.read_body()local args, err = ngx.req.get_post_args()if act == "up" then# 节点状态将设置为UPapi_fun.set_server(ups,args,false,false,zone_define)endif act == "down" then# 节点状态将设置为DOWNapi_fun.set_server(ups,args,true,false,zone_define)endend';}
}

        操作命令如下:

# 查看upstream foo.com的服务器列表
curl "http://127.0.0.1:18080/ups_api?act=list&ups=foo.com"# 将192.168.2.145:8080这个节点设置为DOWN状态
curl -X POST -d "server=192.168.2.145:8080" "http://127.0.0.1:18080/ups_api?act= down&ups=foo.com"# 将192.168.2.145:8080这个节点设置为UP状态
curl -X POST -d "server=192.168.2.145:8080" "http://127.0.0.1:18080/ups_api?act= up&ups=foo.com"

 

 

这篇关于Nginx负载均衡之动态更新upstream的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1069301

相关文章

C#如何动态创建Label,及动态label事件

《C#如何动态创建Label,及动态label事件》:本文主要介绍C#如何动态创建Label,及动态label事件,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录C#如何动态创建Label,及动态label事件第一点:switch中的生成我们的label事件接着,

SpringCloud动态配置注解@RefreshScope与@Component的深度解析

《SpringCloud动态配置注解@RefreshScope与@Component的深度解析》在现代微服务架构中,动态配置管理是一个关键需求,本文将为大家介绍SpringCloud中相关的注解@Re... 目录引言1. @RefreshScope 的作用与原理1.1 什么是 @RefreshScope1.

MyBatis 动态 SQL 优化之标签的实战与技巧(常见用法)

《MyBatis动态SQL优化之标签的实战与技巧(常见用法)》本文通过详细的示例和实际应用场景,介绍了如何有效利用这些标签来优化MyBatis配置,提升开发效率,确保SQL的高效执行和安全性,感... 目录动态SQL详解一、动态SQL的核心概念1.1 什么是动态SQL?1.2 动态SQL的优点1.3 动态S

MySQL新增字段后Java实体未更新的潜在问题与解决方案

《MySQL新增字段后Java实体未更新的潜在问题与解决方案》在Java+MySQL的开发中,我们通常使用ORM框架来映射数据库表与Java对象,但有时候,数据库表结构变更(如新增字段)后,开发人员可... 目录引言1. 问题背景:数据库与 Java 实体不同步1.1 常见场景1.2 示例代码2. 不同操作

如何自定义Nginx JSON日志格式配置

《如何自定义NginxJSON日志格式配置》Nginx作为最流行的Web服务器之一,其灵活的日志配置能力允许我们根据需求定制日志格式,本文将详细介绍如何配置Nginx以JSON格式记录访问日志,这种... 目录前言为什么选择jsON格式日志?配置步骤详解1. 安装Nginx服务2. 自定义JSON日志格式各

Nginx指令add_header和proxy_set_header的区别及说明

《Nginx指令add_header和proxy_set_header的区别及说明》:本文主要介绍Nginx指令add_header和proxy_set_header的区别及说明,具有很好的参考价... 目录Nginx指令add_header和proxy_set_header区别如何理解反向代理?proxy

SpringCloud之LoadBalancer负载均衡服务调用过程

《SpringCloud之LoadBalancer负载均衡服务调用过程》:本文主要介绍SpringCloud之LoadBalancer负载均衡服务调用过程,具有很好的参考价值,希望对大家有所帮助,... 目录前言一、LoadBalancer是什么?二、使用步骤1、启动consul2、客户端加入依赖3、以服务

SpringCloud负载均衡spring-cloud-starter-loadbalancer解读

《SpringCloud负载均衡spring-cloud-starter-loadbalancer解读》:本文主要介绍SpringCloud负载均衡spring-cloud-starter-loa... 目录简述主要特点使用负载均衡算法1. 轮询负载均衡策略(Round Robin)2. 随机负载均衡策略(

一文详解SQL Server如何跟踪自动统计信息更新

《一文详解SQLServer如何跟踪自动统计信息更新》SQLServer数据库中,我们都清楚统计信息对于优化器来说非常重要,所以本文就来和大家简单聊一聊SQLServer如何跟踪自动统计信息更新吧... SQL Server数据库中,我们都清楚统计信息对于优化器来说非常重要。一般情况下,我们会开启"自动更新

Nginx配置location+rewrite实现隐性域名配置

《Nginx配置location+rewrite实现隐性域名配置》本文主要介绍了Nginx配置location+rewrite实现隐性域名配置,包括基于根目录、条件和反向代理+rewrite配置的隐性... 目录1、配置基于根目录的隐性域名(就是nginx反向代理)2、配置基于条件的隐性域名2.1、基于条件