Guava来做接口限流RateLimit

2024-03-13 05:18
文章标签 接口 限流 guava ratelimit

本文主要是介绍Guava来做接口限流RateLimit,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

原文地址:http://blog.csdn.net/jiesa/article/details/50412027

一、问题描述  

  某天A君突然发现自己的接口请求量突然涨到之前的10倍,没多久该接口几乎不可使用,并引发连锁反应导致整个系统崩溃。如何应对这种情况呢?生活给了我们答案:比如老式电闸都安装了保险丝,一旦有人使用超大功率的设备,保险丝就会烧断以保护各个电器不被强电流给烧坏。同理我们的接口也需要安装上“保险丝”,以防止非预期的请求对系统压力过大而引起的系统瘫痪,当流量过大时,可以采取拒绝或者引流等机制。 

二、常用的限流算法

      常用的限流算法有两种:漏桶算法和令牌桶算法,这篇博文介绍得比较清晰(过载保护算法浅析)。

      漏桶算法思路很简单,请求先进入到漏桶里,漏桶以一定的速度出水,当水请求过大会直接溢出,可以看出漏桶算法能强行限制数据的传输速率。


图1 漏桶算法示意图

      对于很多应用场景来说,除了要求能够限制数据的平均传输速率外,还要求允许某种程度的突发传输。这时候漏桶算法可能就不合适了,令牌桶算法更为适合。如图2所示,令牌桶算法的原理是系统会以一个恒定的速度往桶里放入令牌,而如果请求需要被处理,则需要先从桶里获取一个令牌,当桶里没有令牌可取时,则拒绝服务。


图2 令牌桶算法示意图

三、限流工具类RateLimiter

   google开源工具包guava提供了限流工具类RateLimiter,该类基于“令牌桶算法”,非常方便使用。该类的接口描述请参考:RateLimiter接口描述,具体的使用请参考:RateLimiter使用实践。


RateLimiter 使用Demo

[java]  view plain copy
  1. package ratelimite;  
  2.   
  3. import com.google.common.util.concurrent.RateLimiter;  
  4.    
  5. public class RateLimiterDemo {  
  6.     public static void main(String[] args) {  
  7.         testNoRateLimiter();  
  8.         testWithRateLimiter();  
  9.     }  
  10.    
  11.     public static void testNoRateLimiter() {  
  12.         Long start = System.currentTimeMillis();  
  13.         for (int i = 0; i < 10; i++) {  
  14.             System.out.println("call execute.." + i);  
  15.               
  16.         }  
  17.         Long end = System.currentTimeMillis();  
  18.           
  19.         System.out.println(end - start);  
  20.           
  21.     }  
  22.       
  23.     public static void testWithRateLimiter() {  
  24.         Long start = System.currentTimeMillis();  
  25.         RateLimiter limiter = RateLimiter.create(10.0); // 每秒不超过10个任务被提交  
  26.         for (int i = 0; i < 10; i++) {  
  27.             limiter.acquire(); // 请求RateLimiter, 超过permits会被阻塞  
  28.             System.out.println("call execute.." + i);  
  29.               
  30.         }  
  31.         Long end = System.currentTimeMillis();  
  32.           
  33.         System.out.println(end - start);  
  34.           
  35.     }  
  36.       
  37. }  
  38.    

四 Guava并发:ListenableFuture与RateLimiter示例

概念

        ListenableFuture顾名思义就是可以监听的Future,它是对Java原生Future的扩展增强。我们知道Future表示一个异步计算任务,当任务完成时可以得到计算结果。如果我们希望一旦计算完成就拿到结果展示给用户或者做另外的计算,就必须使用另一个线程不断的查询计算状态。这样做,代码复杂,而且效率低下。使用ListenableFuture Guava帮我们检测Future是否完成了,如果完成就自动调用回调函数,这样可以减少并发程序的复杂度。      

        推荐使用第二种方法,因为第二种方法可以直接得到Future的返回值,或者处理错误情况。本质上第二种方法是通过调动第一种方法实现的,做了进一步的封装。

另外ListenableFuture还有其他几种内置实现:

  1. SettableFuture:不需要实现一个方法来计算返回值,而只需要返回一个固定值来做为返回值,可以通过程序设置此Future的返回值或者异常信息

  2. CheckedFuture: 这是一个继承自ListenableFuture接口,他提供了checkedGet()方法,此方法在Future执行发生异常时,可以抛出指定类型的异常。


    RateLimiter类似于JDK的信号量Semphore,他用来限制对资源并发访问的线程数,本文介绍RateLimiter使用

代码示例

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
import  java.util.concurrent.Callable;
import  java.util.concurrent.ExecutionException;
import  java.util.concurrent.Executors;
import  java.util.concurrent.TimeUnit;
import  com.google.common.util.concurrent.FutureCallback;
import  com.google.common.util.concurrent.Futures;
import  com.google.common.util.concurrent.ListenableFuture;
import  com.google.common.util.concurrent.ListeningExecutorService;
import  com.google.common.util.concurrent.MoreExecutors;
import  com.google.common.util.concurrent.RateLimiter;
public  class  ListenableFutureDemo {
     public  static  void  main(String[] args) {
         testRateLimiter();
         testListenableFuture();
     }
     /**
      * RateLimiter类似于JDK的信号量Semphore,他用来限制对资源并发访问的线程数
      */
     public  static  void  testRateLimiter() {
         ListeningExecutorService executorService = MoreExecutors
                 .listeningDecorator(Executors.newCachedThreadPool());
         RateLimiter limiter = RateLimiter.create( 5.0 );  // 每秒不超过5个任务被提交
         for  ( int  i =  0 ; i <  10 ; i++) {
             limiter.acquire();  // 请求RateLimiter, 超过permits会被阻塞
             final  ListenableFuture<Integer> listenableFuture = executorService
                     .submit( new  Task( "is " + i));
         }
     }
     public  static  void  testListenableFuture() {
         ListeningExecutorService executorService = MoreExecutors
                 .listeningDecorator(Executors.newCachedThreadPool());
         final  ListenableFuture<Integer> listenableFuture = executorService
                 .submit( new  Task( "testListenableFuture" ));
         
         //同步获取调用结果
         try  {
             System.out.println(listenableFuture.get());
         catch  (InterruptedException e1) {
             e1.printStackTrace();
         catch  (ExecutionException e1) {
             e1.printStackTrace();
         }
         
         //第一种方式
         listenableFuture.addListener( new  Runnable() {
             @Override
             public  void  run() {
                 try  {
                     System.out.println( "get listenable future's result "
                             + listenableFuture.get());
                 catch  (InterruptedException e) {
                     e.printStackTrace();
                 catch  (ExecutionException e) {
                     e.printStackTrace();
                 }
             }
         }, executorService);
         //第二种方式
         Futures.addCallback(listenableFuture,  new  FutureCallback<Integer>() {
             @Override
             public  void  onSuccess(Integer result) {
                 System.out
                         .println( "get listenable future's result with callback "
                                 + result);
             }
             @Override
             public  void  onFailure(Throwable t) {
                 t.printStackTrace();
             }
         });
     }
}
class  Task  implements  Callable<Integer> {
     String str;
     public  Task(String str){
         this .str = str;
     }
     @Override
     public  Integer call()  throws  Exception {
         System.out.println( "call execute.."  + str);
         TimeUnit.SECONDS.sleep( 1 );
         return  7 ;
     }
}

Guava版本

?
1
2
3
4
5
< dependency >
             < groupId >com.google.guava</ groupId >
             < artifactId >guava</ artifactId >
             < version >14.0.1</ version >
         </ dependency >


本文是对以下文章的加工整合。

http://www.w2bc.com/Article/10235

http://my.oschina.NET/cloudcoder/blog/359598


这篇关于Guava来做接口限流RateLimit的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/803737

相关文章

Java 后端接口入参 - 联合前端VUE 使用AES完成入参出参加密解密

加密效果: 解密后的数据就是正常数据: 后端:使用的是spring-cloud框架,在gateway模块进行操作 <dependency><groupId>com.google.guava</groupId><artifactId>guava</artifactId><version>30.0-jre</version></dependency> 编写一个AES加密

java线程深度解析(一)——java new 接口?匿名内部类给你答案

http://blog.csdn.net/daybreak1209/article/details/51305477 一、内部类 1、内部类初识 一般,一个类里主要包含类的方法和属性,但在Java中还提出在类中继续定义类(内部类)的概念。 内部类的定义:类的内部定义类 先来看一个实例 [html]  view plain copy pu

模拟实现vector中的常见接口

insert void insert(iterator pos, const T& x){if (_finish == _endofstorage){int n = pos - _start;size_t newcapacity = capacity() == 0 ? 2 : capacity() * 2;reserve(newcapacity);pos = _start + n;//防止迭代

京东物流查询|开发者调用API接口实现

快递聚合查询的优势 1、高效整合多种快递信息。2、实时动态更新。3、自动化管理流程。 聚合国内外1500家快递公司的物流信息查询服务,使用API接口查询京东物流的便捷步骤,首先选择专业的数据平台的快递API接口:物流快递查询API接口-单号查询API - 探数数据 以下示例是参考的示例代码: import requestsurl = "http://api.tanshuapi.com/a

股票数据接口-陈科肇

陈科肇 新浪财经 sz-深圳sh-上海历史分价表:http://market.finance.sina.com.cn/pricehis.php?symbol=sz000506&startdate=2016-12-27&enddate=2016-12-27历史成交明细(当日成交明细):http://vip.stock.finance.sina.com.cn/quotes_service/v

Java后端微服务架构下的API限流策略:Guava RateLimiter

Java后端微服务架构下的API限流策略:Guava RateLimiter 大家好,我是微赚淘客返利系统3.0的小编,是个冬天不穿秋裤,天冷也要风度的程序猿! 在微服务架构中,API限流是保护服务不受过度使用和拒绝服务攻击的重要手段。Guava RateLimiter是Google开源的Java库中的一个组件,提供了简单易用的限流功能。 API限流概述 API限流通过控制请求的速率来防止

实例demo理解面向接口思想

浅显的理解面向接口编程 Android开发的语言是java,至少目前是,所以理解面向接口的思想是有必要的。下面通过一个简单的例子来理解。具体的概括我也不知道怎么说。 例子: 现在我们要开发一个应用,模拟移动存储设备的读写,即计算机与U盘、MP3、移动硬盘等设备进行数据交换。已知要实现U盘、MP3播放器、移动硬盘三种移动存储设备,要求计算机能同这三种设备进行数据交换,并且以后可能会有新的第三方的

对接话费充值API接口的开发步骤以及各种优势

对接话费充值API接口通常涉及以下步骤: 1.选择API提供商: 研究并选择一个可靠的话费充值API提供商。考虑因素包括覆盖范围、费率、交易限额、客户支持和用户评价。 2.注册和获取API密钥: 在选定的API提供商平台上注册账户,并获取API密钥或访问令牌,这是调用API时进行身份验证的必要信息。 3.阅读API文档: 仔细阅读API文档,了解如何构建请求、需要哪些参数、API的

java类中定义接口的有哪些好处

第一步:首先是是定义一个类,同时里面定义接口 public class Util { public interface Worker { void work(int a); } } 第二步:定义一个类去实现第一步类中定义的接口 public class Demo implements Worker { @Override public void work(int a) { System

[苍穹外卖]-04菜品管理接口开发

效果预览 新增菜品 需求分析 查看产品原型分析需求, 包括用到哪些接口, 业务的限制规则 业务规则 菜品名称必须是唯一的菜品必须属于某个分类下, 不能单独存在新增菜品时可以根据情况选择菜品的口味每个菜品必须对应一张图片 接口设计 根据类型查询分类接口 文件上传接口 新增菜品接口 数据表设计 设计dish菜品表 和 dish_fl