Filter 实现过滤符合条件的请求并落库

2024-02-08 13:52

本文主要是介绍Filter 实现过滤符合条件的请求并落库,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

其他系列文章导航

Java基础合集
数据结构与算法合集

设计模式合集

多线程合集

分布式合集

ES合集


文章目录

其他系列文章导航

文章目录

前言

一、配置过滤器类

二、定义数据表、实体类、Mapper

2.1 DDL

2.2 实体类

2.3 Mapper

三、创建一个过滤器

四、实现 Nacos 配置热更新

五、自定义 RequestWrapper 

六、容易踩的坑 

6.1 Java 工具类 Mapper 层报空指针

6.2 工具类中使用 @Value 给静态变量注入值失败

七、总结


前言

Java过滤器(Filter)在Java Servlet API中是一个非常有用的组件,它允许你在请求到达Servlet或JSP之前或之后执行某些操作。

 

需求:当请求进入系统时进行拦截,如果符合拦截规则就将请求详情落库。

背景:SpringCloud 项目,注册中心是 Nacos。


一、配置过滤器类

首先,你需要在你的Spring Boot应用中添加Nacos的依赖。

我们选择 OncePerRequestFilter。

OncePerRequestFilter定义:

OncePerRequestFilter 是 Spring Framework 中的一个过滤器接口,用于处理每个请求只执行一次的逻辑。这个过滤器类型是为了确保某个特定的逻辑只会在一个请求中被执行一次,无论该请求经过了多少个过滤器链。

使用 OncePerRequestFilter 的一个常见场景是,你可能希望在每个请求处理之前或之后执行某些操作,但又不希望这些操作在每个过滤器链中被重复执行。

 

然后,你可以创建一个过滤器类,如下所示:

@Configuration
public class FilterConfig {@Beanpublic FilterRegistrationBean<OncePerRequestFilter> logFilter() {FilterRegistrationBean<OncePerRequestFilter> registration = new FilterRegistrationBean<>();registration.setFilter(new RequestLogFilter());registration.setOrder(Ordered.HIGHEST_PRECEDENCE);return registration;}
}

这个配置类定义了一个过滤器,名为logFilter,它在每个请求上只执行一次(由其实现的OncePerRequestFilter接口保证)。

这个过滤器用于请求日志记录,其顺序被设置为最高优先级。 


二、定义数据表、实体类、Mapper

2.1 DDL

请求时间入库自动生成。

create table C##YYTXD.SHUXX_REQUEST_LOGS
(METHOD  VARCHAR2(10),URI     VARCHAR2(255),HEADERS VARCHAR2(4000),BODY    VARCHAR2(4000),IP      VARCHAR2(255),TIME    TIMESTAMP(6) default CURRENT_TIMESTAMP
)
/

2.2 实体类

定义一个Java实体类,用于映射数据库中的REQUEST_LOGS表。该类使用了Lombok库来简化代码的编写,同时使用了MyBatis Plus库的注解来方便地与数据库交互。

如下所示:

@TableName(value ="REQUEST_LOGS")
@Data
public class RequestLogs implements Serializable {private String method;private String uri;private String headers;private String body;private String ip;@TableField(exist = false)private Date time;@TableField(exist = false)private static final long serialVersionUID = 1L;
}

这个实体类主要用于封装HTTP请求的日志信息,方便存储到数据库中。

每个日志记录可以包含请求的方法、URI、头部信息、正文内容、发起请求的IP地址以及请求的时间等信息。 

2.3 Mapper

@Mapper
public interface RequestLogsMapper extends BaseMapper<RequestLogs> {}
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mapperPUBLIC "-//mybatis.org//DTD Mapper 3.0//EN""http://mybatis.org/dtd/mybatis-3-mapper.dtd">
<mapper namespace="com.mapper.RequestLogsMapper"><resultMap id="BaseResultMap" type="com.domain.po.RequestLogs"><result property="method" column="METHOD" jdbcType="VARCHAR"/><result property="uri" column="URI" jdbcType="VARCHAR"/><result property="headers" column="HEADERS" jdbcType="VARCHAR"/><result property="body" column="BODY" jdbcType="VARCHAR"/><result property="ip" column="IP" jdbcType="VARCHAR"/><result property="time" column="TIME" jdbcType="TIMESTAMP"/></resultMap><sql id="Base_Column_List">METHOD,URL,HEADERS,BODY,IP,TIME</sql></mapper>

三、创建一个过滤器

该过滤器用于记录HTTP请求日志。这个类继承了OncePerRequestFilter,这意味着它会在每个请求上只执行一次。如下所示:

@Component
public class RequestLogFilter extends OncePerRequestFilter {@Resourceprivate RequestLogUriProperties requestLogUrlProperties;@Resourceprivate RequestLogsMapper requestLogsMapper;public RequestLogFilter() {}public static RequestLogFilter requestLogFilter;@PostConstructpublic void init() {requestLogFilter = this;}@Overrideprotected void doFilterInternal(HttpServletRequest request, HttpServletResponse response, FilterChain filterChain) throws ServletException, IOException {String uri = request.getRequestURI();AntPathMatcher matcher = new AntPathMatcher();HttpServletRequest requestWrapper = new RequestWrapper(request);for (String filterUri : requestLogFilter.requestLogUrlProperties.getUris()) {if (!matcher.match(filterUri, uri)) continue;String method = request.getMethod();String ip = request.getRemoteAddr();String body = RequestWrapper.getBodyString(requestWrapper);Enumeration<String> headerNames = request.getHeaderNames();Map<String, String> headers = new HashMap<>();// 遍历所有请求头,并存入Map中while (headerNames.hasMoreElements()) {String headerName = headerNames.nextElement();String headerValue = request.getHeader(headerName);headers.put(headerName, headerValue);}RequestLogs logsDto = new RequestLogs();logsDto.setMethod(method);logsDto.setUri(uri);logsDto.setHeaders(headers.toString());logsDto.setBody(body);logsDto.setIp(ip);requestLogFilter.shuxxRequestLogsMapper.insert(logsDto);}// 继续传递请求filterChain.doFilter(requestWrapper, response);}
}

这个过滤器的主要目的是捕获与特定URI模式匹配的所有HTTP请求,并将这些请求的相关信息记录到日志中。

特定URI模式匹配使用的是 ant url。匹配规则定义在配置文件中。


四、实现 Nacos 配置热更新

配置和初始化一个名为RequestLogUriProperties的bean。

这个bean主要用于存储和获取需要记录日志的URL列表。如下所示:

@Configuration
@ConfigurationProperties(prefix = "request-log")
@RefreshScope
//Nacos配置热更新
public class RequestLogUriProperties {public List<String> getUris() {return uris;}public void setUris(List<String> uris) {this.uris = uris;}private List<String> uris;}

通过与Spring的属性绑定机制结合,在 Nacos 配置文件中定义这些URL,并通过setter方法将其设置到bean中。同时,由于使用了@RefreshScope注解,当这些URL的配置发生变化时,bean会被重新初始化,从而实现配置的热更新。 

注解解释:

  • @Configuration: 这是Spring框架的注解,表示该类是一个配置类,用于定义和注册beans。
  • @ConfigurationProperties(prefix = "request-log"): 这个注解将RequestLogUriProperties类与Spring的属性绑定机制结合,使得你可以在外部配置文件中使用request-log前缀来定义属性,并这些属性会自动填充到RequestLogUriProperties类的字段中。
  • @RefreshScope: 这是Spring Cloud的注解,用于支持配置的热更新。当配置发生变化时,带有此注解的bean会被重新初始化。

Nacos 中配置:

request-log:uris:- /index/*- ......

这个配置会拦截所以 uri 是 /index/* 的请求。 


五、自定义 RequestWrapper 

spring boot项目,在过滤器、拦截器或自定义 aop 做统一处理时,获取了request中的inputstream来获取RequestBody里数据,获取之后在Controller里使用@RequestBody注解再获取的话。

就报错:Stream closed。

这是因为 HttpServletRequest 中的 inputstream 是不可重复读的。

所以我们要自定义 RequestWrapper ,对 HttpServletRequest 进行处理。

public class RequestWrapper extends HttpServletRequestWrapper {private final byte[] body;public RequestWrapper(HttpServletRequest request) {super(request);// 获取 requestBody 中的数据body = getBodyString(request).getBytes(StandardCharsets.UTF_8);}//通过覆盖getReader和getInputStream方法,将request中的body数据存储到内存中的输入流,使得body数据能够被多次读取。@Overridepublic BufferedReader getReader() {return new BufferedReader(new InputStreamReader(getInputStream()));}@Overridepublic ServletInputStream getInputStream() {// 定义内存中的输入流final ByteArrayInputStream stream = new ByteArrayInputStream(body);return new ServletInputStream() {@Overridepublic int read() {// 使用内存输入流读取数据return stream.read();}@Overridepublic boolean isFinished() {return false;}@Overridepublic boolean isReady() {return false;}@Overridepublic void setReadListener(ReadListener readListener) {}};}//getBodyString方法用于获取request的body数据并转换为字符串返回。public static String getBodyString(HttpServletRequest request) {StringBuilder sb = new StringBuilder();InputStream inputStream = null;BufferedReader reader = null;try {inputStream = request.getInputStream();reader = new BufferedReader(new InputStreamReader(inputStream, StandardCharsets.UTF_8));String line;while ((line = reader.readLine()) != null) {sb.append(line);}} catch (IOException e) {e.printStackTrace();} finally {if (inputStream != null) {try {inputStream.close();} catch (IOException e) {e.printStackTrace();}}if (reader != null) {try {reader.close();} catch (IOException e) {e.printStackTrace();}}}return sb.toString();}
}

这个类包装了一个HttpServletRequest对象。这个类的主要目的是重写HttpServletRequestgetReadergetInputStream方法,以便将请求体的数据存储在内存中的输入流,从而允许多次读取请求体的数据。


六、容易踩的坑 

6.1 Java 工具类 Mapper 层报空指针

问题:

在使用Spring框架时,尝试将Service注入到非Spring管理的静态方法或工具类中。在Spring中,依赖注入主要依赖于@Autowired@Resource注解,但是这些注解不适用于静态方法或非Spring管理的类。

原因:

当你在Controller层使用Service时,可以通过@Resource或@Autowired注解轻松注入Service。但在普通类或工具类中使用Service时,会遇到找不到注解的属性值的问题,导致Service为null并报空指针异常。

即使在调用Service的类中添加了@Component注解并加入了Spring容器管理,问题仍然存在。

另外,由于工具类或普通类是静态方法,而Service和Mapper是非静态的,因此无法直接注入到静态方法中。

即使将Service和Mapper注入为静态的,仍然会报空指针异常。

为了解决这个问题,你可以考虑使用单例模式、使用ApplicationContext、重构代码或避免在工具类或普通类中使用静态方法。

解决方法如下:

    public RequestLogFilter() {}public static RequestLogFilter requestLogFilter;@PostConstructpublic void init() {requestLogFilter = this;}

在类的实例化完成后,它的当前实例会被设置为静态字段requestLogFilter的引用。这种模式通常用于单例模式或确保只有一个实例存在的其他模式。

6.2 工具类中使用 @Value 给静态变量注入值失败

问题:

在SpringBoot中使用@value注解只能给普通变量注入值,不能直接给静态变量赋值,直接给静态变量赋值的话这些值会一直为null。

解决方案: 

若要给静态变量赋值,可以使用set()方法,首先在对应的类上加上@Component注解,在set方法上使用value注解(注意set方法不是静态的,否则无法赋值)。

    private static String uri;@Value("${uri}")public void seturi(String uri) {this.uri= uri;}

七、总结

实现一个高效的过滤器需要仔细考虑多个方面,包括规则定义、拦截机制、处理逻辑、性能优化、异常处理、配置管理和安全性。

通过合理地设计和实现过滤器,可以帮助提高系统的安全性、可维护性和可靠性。

此外,了解不同过滤器框架和技术的特点可以帮助你选择最适合你的特定需求的解决方案。


 

这篇关于Filter 实现过滤符合条件的请求并落库的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/691227

相关文章

Qt实现对Word网页的读取功能

《Qt实现对Word网页的读取功能》文章介绍了几种在Qt中实现Word文档(.docx/.doc)读写功能的方法,包括基于QAxObject的COM接口调用、DOCX模板替换及跨平台解决方案,重点讨论... 目录1. 核心实现方式2. 基于QAxObject的COM接口调用(Windows专用)2.1 环境

MySQL查看表的历史SQL的几种实现方法

《MySQL查看表的历史SQL的几种实现方法》:本文主要介绍多种查看MySQL表历史SQL的方法,包括通用查询日志、慢查询日志、performance_schema、binlog、第三方工具等,并... 目录mysql 查看某张表的历史SQL1.查看MySQL通用查询日志(需提前开启)2.查看慢查询日志3.

Java实现字符串大小写转换的常用方法

《Java实现字符串大小写转换的常用方法》在Java中,字符串大小写转换是文本处理的核心操作之一,Java提供了多种灵活的方式来实现大小写转换,适用于不同场景和需求,本文将全面解析大小写转换的各种方法... 目录前言核心转换方法1.String类的基础方法2. 考虑区域设置的转换3. 字符级别的转换高级转换

使用Python实现局域网远程监控电脑屏幕的方法

《使用Python实现局域网远程监控电脑屏幕的方法》文章介绍了两种使用Python在局域网内实现远程监控电脑屏幕的方法,方法一使用mss和socket,方法二使用PyAutoGUI和Flask,每种方... 目录方法一:使用mss和socket实现屏幕共享服务端(被监控端)客户端(监控端)方法二:使用PyA

MyBatis-Plus逻辑删除实现过程

《MyBatis-Plus逻辑删除实现过程》本文介绍了MyBatis-Plus如何实现逻辑删除功能,包括自动填充字段、配置与实现步骤、常见应用场景,并展示了如何使用remove方法进行逻辑删除,逻辑删... 目录1. 逻辑删除的必要性编程1.1 逻辑删除的定义1.2 逻辑删php除的优点1.3 适用场景2.

C#借助Spire.XLS for .NET实现在Excel中添加文档属性

《C#借助Spire.XLSfor.NET实现在Excel中添加文档属性》在日常的数据处理和项目管理中,Excel文档扮演着举足轻重的角色,本文将深入探讨如何在C#中借助强大的第三方库Spire.... 目录为什么需要程序化添加Excel文档属性使用Spire.XLS for .NET库实现文档属性管理Sp

Python+FFmpeg实现视频自动化处理的完整指南

《Python+FFmpeg实现视频自动化处理的完整指南》本文总结了一套在Python中使用subprocess.run调用FFmpeg进行视频自动化处理的解决方案,涵盖了跨平台硬件加速、中间素材处理... 目录一、 跨平台硬件加速:统一接口设计1. 核心映射逻辑2. python 实现代码二、 中间素材处

Java数组动态扩容的实现示例

《Java数组动态扩容的实现示例》本文主要介绍了Java数组动态扩容的实现示例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧... 目录1 问题2 方法3 结语1 问题实现动态的给数组添加元素效果,实现对数组扩容,原始数组使用静态分配

Spring Boot Interceptor的原理、配置、顺序控制及与Filter的关键区别对比分析

《SpringBootInterceptor的原理、配置、顺序控制及与Filter的关键区别对比分析》本文主要介绍了SpringBoot中的拦截器(Interceptor)及其与过滤器(Filt... 目录前言一、核心功能二、拦截器的实现2.1 定义自定义拦截器2.2 注册拦截器三、多拦截器的执行顺序四、过

Python实现快速扫描目标主机的开放端口和服务

《Python实现快速扫描目标主机的开放端口和服务》这篇文章主要为大家详细介绍了如何使用Python编写一个功能强大的端口扫描器脚本,实现快速扫描目标主机的开放端口和服务,感兴趣的小伙伴可以了解下... 目录功能介绍场景应用1. 网络安全审计2. 系统管理维护3. 网络故障排查4. 合规性检查报错处理1.