Guava来做接口限流RateLimit

2024-03-13 05:18
文章标签 接口 限流 guava ratelimit

本文主要是介绍Guava来做接口限流RateLimit,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

原文地址:http://blog.csdn.net/jiesa/article/details/50412027

一、问题描述  

  某天A君突然发现自己的接口请求量突然涨到之前的10倍,没多久该接口几乎不可使用,并引发连锁反应导致整个系统崩溃。如何应对这种情况呢?生活给了我们答案:比如老式电闸都安装了保险丝,一旦有人使用超大功率的设备,保险丝就会烧断以保护各个电器不被强电流给烧坏。同理我们的接口也需要安装上“保险丝”,以防止非预期的请求对系统压力过大而引起的系统瘫痪,当流量过大时,可以采取拒绝或者引流等机制。 

二、常用的限流算法

      常用的限流算法有两种:漏桶算法和令牌桶算法,这篇博文介绍得比较清晰(过载保护算法浅析)。

      漏桶算法思路很简单,请求先进入到漏桶里,漏桶以一定的速度出水,当水请求过大会直接溢出,可以看出漏桶算法能强行限制数据的传输速率。


图1 漏桶算法示意图

      对于很多应用场景来说,除了要求能够限制数据的平均传输速率外,还要求允许某种程度的突发传输。这时候漏桶算法可能就不合适了,令牌桶算法更为适合。如图2所示,令牌桶算法的原理是系统会以一个恒定的速度往桶里放入令牌,而如果请求需要被处理,则需要先从桶里获取一个令牌,当桶里没有令牌可取时,则拒绝服务。


图2 令牌桶算法示意图

三、限流工具类RateLimiter

   google开源工具包guava提供了限流工具类RateLimiter,该类基于“令牌桶算法”,非常方便使用。该类的接口描述请参考:RateLimiter接口描述,具体的使用请参考:RateLimiter使用实践。


RateLimiter 使用Demo

[java]  view plain copy
  1. package ratelimite;  
  2.   
  3. import com.google.common.util.concurrent.RateLimiter;  
  4.    
  5. public class RateLimiterDemo {  
  6.     public static void main(String[] args) {  
  7.         testNoRateLimiter();  
  8.         testWithRateLimiter();  
  9.     }  
  10.    
  11.     public static void testNoRateLimiter() {  
  12.         Long start = System.currentTimeMillis();  
  13.         for (int i = 0; i < 10; i++) {  
  14.             System.out.println("call execute.." + i);  
  15.               
  16.         }  
  17.         Long end = System.currentTimeMillis();  
  18.           
  19.         System.out.println(end - start);  
  20.           
  21.     }  
  22.       
  23.     public static void testWithRateLimiter() {  
  24.         Long start = System.currentTimeMillis();  
  25.         RateLimiter limiter = RateLimiter.create(10.0); // 每秒不超过10个任务被提交  
  26.         for (int i = 0; i < 10; i++) {  
  27.             limiter.acquire(); // 请求RateLimiter, 超过permits会被阻塞  
  28.             System.out.println("call execute.." + i);  
  29.               
  30.         }  
  31.         Long end = System.currentTimeMillis();  
  32.           
  33.         System.out.println(end - start);  
  34.           
  35.     }  
  36.       
  37. }  
  38.    

四 Guava并发:ListenableFuture与RateLimiter示例

概念

        ListenableFuture顾名思义就是可以监听的Future,它是对Java原生Future的扩展增强。我们知道Future表示一个异步计算任务,当任务完成时可以得到计算结果。如果我们希望一旦计算完成就拿到结果展示给用户或者做另外的计算,就必须使用另一个线程不断的查询计算状态。这样做,代码复杂,而且效率低下。使用ListenableFuture Guava帮我们检测Future是否完成了,如果完成就自动调用回调函数,这样可以减少并发程序的复杂度。      

        推荐使用第二种方法,因为第二种方法可以直接得到Future的返回值,或者处理错误情况。本质上第二种方法是通过调动第一种方法实现的,做了进一步的封装。

另外ListenableFuture还有其他几种内置实现:

  1. SettableFuture:不需要实现一个方法来计算返回值,而只需要返回一个固定值来做为返回值,可以通过程序设置此Future的返回值或者异常信息

  2. CheckedFuture: 这是一个继承自ListenableFuture接口,他提供了checkedGet()方法,此方法在Future执行发生异常时,可以抛出指定类型的异常。


    RateLimiter类似于JDK的信号量Semphore,他用来限制对资源并发访问的线程数,本文介绍RateLimiter使用

代码示例

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
import  java.util.concurrent.Callable;
import  java.util.concurrent.ExecutionException;
import  java.util.concurrent.Executors;
import  java.util.concurrent.TimeUnit;
import  com.google.common.util.concurrent.FutureCallback;
import  com.google.common.util.concurrent.Futures;
import  com.google.common.util.concurrent.ListenableFuture;
import  com.google.common.util.concurrent.ListeningExecutorService;
import  com.google.common.util.concurrent.MoreExecutors;
import  com.google.common.util.concurrent.RateLimiter;
public  class  ListenableFutureDemo {
     public  static  void  main(String[] args) {
         testRateLimiter();
         testListenableFuture();
     }
     /**
      * RateLimiter类似于JDK的信号量Semphore,他用来限制对资源并发访问的线程数
      */
     public  static  void  testRateLimiter() {
         ListeningExecutorService executorService = MoreExecutors
                 .listeningDecorator(Executors.newCachedThreadPool());
         RateLimiter limiter = RateLimiter.create( 5.0 );  // 每秒不超过5个任务被提交
         for  ( int  i =  0 ; i <  10 ; i++) {
             limiter.acquire();  // 请求RateLimiter, 超过permits会被阻塞
             final  ListenableFuture<Integer> listenableFuture = executorService
                     .submit( new  Task( "is " + i));
         }
     }
     public  static  void  testListenableFuture() {
         ListeningExecutorService executorService = MoreExecutors
                 .listeningDecorator(Executors.newCachedThreadPool());
         final  ListenableFuture<Integer> listenableFuture = executorService
                 .submit( new  Task( "testListenableFuture" ));
         
         //同步获取调用结果
         try  {
             System.out.println(listenableFuture.get());
         catch  (InterruptedException e1) {
             e1.printStackTrace();
         catch  (ExecutionException e1) {
             e1.printStackTrace();
         }
         
         //第一种方式
         listenableFuture.addListener( new  Runnable() {
             @Override
             public  void  run() {
                 try  {
                     System.out.println( "get listenable future's result "
                             + listenableFuture.get());
                 catch  (InterruptedException e) {
                     e.printStackTrace();
                 catch  (ExecutionException e) {
                     e.printStackTrace();
                 }
             }
         }, executorService);
         //第二种方式
         Futures.addCallback(listenableFuture,  new  FutureCallback<Integer>() {
             @Override
             public  void  onSuccess(Integer result) {
                 System.out
                         .println( "get listenable future's result with callback "
                                 + result);
             }
             @Override
             public  void  onFailure(Throwable t) {
                 t.printStackTrace();
             }
         });
     }
}
class  Task  implements  Callable<Integer> {
     String str;
     public  Task(String str){
         this .str = str;
     }
     @Override
     public  Integer call()  throws  Exception {
         System.out.println( "call execute.."  + str);
         TimeUnit.SECONDS.sleep( 1 );
         return  7 ;
     }
}

Guava版本

?
1
2
3
4
5
< dependency >
             < groupId >com.google.guava</ groupId >
             < artifactId >guava</ artifactId >
             < version >14.0.1</ version >
         </ dependency >


本文是对以下文章的加工整合。

http://www.w2bc.com/Article/10235

http://my.oschina.NET/cloudcoder/blog/359598


这篇关于Guava来做接口限流RateLimit的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/803737

相关文章

PHP应用中处理限流和API节流的最佳实践

《PHP应用中处理限流和API节流的最佳实践》限流和API节流对于确保Web应用程序的可靠性、安全性和可扩展性至关重要,本文将详细介绍PHP应用中处理限流和API节流的最佳实践,下面就来和小编一起学习... 目录限流的重要性在 php 中实施限流的最佳实践使用集中式存储进行状态管理(如 Redis)采用滑动

SpringBoot实现不同接口指定上传文件大小的具体步骤

《SpringBoot实现不同接口指定上传文件大小的具体步骤》:本文主要介绍在SpringBoot中通过自定义注解、AOP拦截和配置文件实现不同接口上传文件大小限制的方法,强调需设置全局阈值远大于... 目录一  springboot实现不同接口指定文件大小1.1 思路说明1.2 工程启动说明二 具体实施2

基于Redisson实现分布式系统下的接口限流

《基于Redisson实现分布式系统下的接口限流》在高并发场景下,接口限流是保障系统稳定性的重要手段,本文将介绍利用Redisson结合Redis实现分布式环境下的接口限流,具有一定的参考价值,感兴趣... 目录分布式限流的核心挑战基于 Redisson 的分布式限流设计思路实现步骤引入依赖定义限流注解实现

SpringBoot实现RSA+AES自动接口解密的实战指南

《SpringBoot实现RSA+AES自动接口解密的实战指南》在当今数据泄露频发的网络环境中,接口安全已成为开发者不可忽视的核心议题,RSA+AES混合加密方案因其安全性高、性能优越而被广泛采用,本... 目录一、项目依赖与环境准备1.1 Maven依赖配置1.2 密钥生成与配置二、加密工具类实现2.1

使用Python的requests库调用API接口的详细步骤

《使用Python的requests库调用API接口的详细步骤》使用Python的requests库调用API接口是开发中最常用的方式之一,它简化了HTTP请求的处理流程,以下是详细步骤和实战示例,涵... 目录一、准备工作:安装 requests 库二、基本调用流程(以 RESTful API 为例)1.

springboot自定义注解RateLimiter限流注解技术文档详解

《springboot自定义注解RateLimiter限流注解技术文档详解》文章介绍了限流技术的概念、作用及实现方式,通过SpringAOP拦截方法、缓存存储计数器,结合注解、枚举、异常类等核心组件,... 目录什么是限流系统架构核心组件详解1. 限流注解 (@RateLimiter)2. 限流类型枚举 (

SpringBoot+Redis防止接口重复提交问题

《SpringBoot+Redis防止接口重复提交问题》:本文主要介绍SpringBoot+Redis防止接口重复提交问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不... 目录前言实现思路代码示例测试总结前言在项目的使用使用过程中,经常会出现某些操作在短时间内频繁提交。例

Spring Boot 实现 IP 限流的原理、实践与利弊解析

《SpringBoot实现IP限流的原理、实践与利弊解析》在SpringBoot中实现IP限流是一种简单而有效的方式来保障系统的稳定性和可用性,本文给大家介绍SpringBoot实现IP限... 目录一、引言二、IP 限流原理2.1 令牌桶算法2.2 漏桶算法三、使用场景3.1 防止恶意攻击3.2 控制资源

springboot下载接口限速功能实现

《springboot下载接口限速功能实现》通过Redis统计并发数动态调整每个用户带宽,核心逻辑为每秒读取并发送限定数据量,防止单用户占用过多资源,确保整体下载均衡且高效,本文给大家介绍spring... 目录 一、整体目标 二、涉及的主要类/方法✅ 三、核心流程图解(简化) 四、关键代码详解1️⃣ 设置

spring中的ImportSelector接口示例详解

《spring中的ImportSelector接口示例详解》Spring的ImportSelector接口用于动态选择配置类,实现条件化和模块化配置,关键方法selectImports根据注解信息返回... 目录一、核心作用二、关键方法三、扩展功能四、使用示例五、工作原理六、应用场景七、自定义实现Impor