hive-exec.jar与Simba JDBC For Google Bigquery依赖jar包冲突问题解决方案

本文主要是介绍hive-exec.jar与Simba JDBC For Google Bigquery依赖jar包冲突问题解决方案,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

hive-exec.jar与Simba JDBC For Google Bigquery依赖jar包冲突问题解决方案

  • 问题背景
  • 问题产生原因
  • 问题解决方案
  • 结论

问题背景

在实际项目中,当我们同一个项目的maven依赖同时依赖hive-exec.jar和Simba JDBC For Google Bigquery依赖的guava.jar包时,在运行项目时,会报错找不到exhaust方法。

网上查询了其他人的解决方案: hive-exec包guava冲突解决

问题产生原因

原因是hive-exec.jar中依赖了guava.jar,guava版本为14.0.1,而JDBC For Google Bigquery依赖的guava.jar包为30.1.1-android,利用反编译软件Luyten查看这两个jar包中com.google.common.io这个包中的ByteStreams类中是否含有exhaust方法,
在这里插入图片描述
在这里插入图片描述
由上可见,在guava.jar中是有exhaust方法的,但是hive-exec.jar中却没有。由于guava.jar是无法向下兼容的。所以必须让两个版本同时存在,所以无法使用maven的exclusion这种方法来排除低版本的依赖。

问题解决方案

试了网上很多解决方法之后,我发现了一个解决冲突的神器——maven-shade-plugin插件。使用这种插件可以完全解决,两种不同版本的jar同时存在一个项目的问题。解决具体步骤如下:

  1. 将引用高版本和低版本的pom依赖区分开,创建一个新的module,将所有的高版本或所有的低版本的pom依赖放在该module的pom中,如下所示:

在这里插入图片描述

  1. 添加插件maven-shade-plugin。
<build><plugins><plugin><groupId>org.apache.maven.plugins</groupId><artifactId>maven-shade-plugin</artifactId><version>2.4.3</version><executions><execution><phase>package</phase><goals><goal>shade</goal></goals><configuration><createDependencyReducedPom>true</createDependencyReducedPom><relocations><!-- 多个包需要替换使用多个relocation--><relocation><!-- pattern 为需要匹配的前缀--><pattern>com.google.common</pattern><!-- shadedPattern 为替换成什么前缀--><shadedPattern>com.shade.google.common</shadedPattern></relocation></relocations></configuration></execution></executions></plugin></plugins></build>
  1. 使用maven编译打包,会发现有两个jar包,一个是原始的jar包,一个是经过插件处理的jar包。在这里插入图片描述
  2. 使用反编译软件分别打开test-1.0-SNAPSHOT.jar包,如下:
    在这里插入图片描述
    在这里插入图片描述
  3. 将test-1.0-SNAPSHOT.jar上传到公司的maven库里面,然后再依赖公司的maven库中的依赖就可以成功运行了,这样依赖冲突的问题就完全解决了。

结论

产生问题的原因是:同一jar包,不同版本在同一个项目中时,高版本在调用方法时,由于包的路径是一样的,maven有可能只加载了低版本的jar包方法,从而导致了找不到类或方法。maven-shade-plugin插件的功能其实就是可以将jar包中包的路径用别名替换,可以将包中的所有import包的路径全都替换为别名,这样就使得同一jar包不同版本的包的路径不一样,这样jvm就会同时加载高低两个版本的jar包,就不会提示找不到该方法啦。

这篇关于hive-exec.jar与Simba JDBC For Google Bigquery依赖jar包冲突问题解决方案的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/248348

相关文章

Python如何快速下载依赖

《Python如何快速下载依赖》本文介绍了四种在Python中快速下载依赖的方法,包括使用国内镜像源、开启pip并发下载功能、使用pipreqs批量下载项目依赖以及使用conda管理依赖,通过这些方法... 目录python快速下载依赖1. 使用国内镜像源临时使用镜像源永久配置镜像源2. 使用 pip 的并

基于.NET编写工具类解决JSON乱码问题

《基于.NET编写工具类解决JSON乱码问题》在开发过程中,我们经常会遇到JSON数据处理的问题,尤其是在数据传输和解析过程中,很容易出现编码错误导致的乱码问题,下面我们就来编写一个.NET工具类来解... 目录问题背景核心原理工具类实现使用示例总结在开发过程中,我们经常会遇到jsON数据处理的问题,尤其是

springboot3.4和mybatis plus的版本问题的解决

《springboot3.4和mybatisplus的版本问题的解决》本文主要介绍了springboot3.4和mybatisplus的版本问题的解决,主要由于SpringBoot3.4与MyBat... 报错1:spring-boot-starter/3.4.0/spring-boot-starter-

在 Spring Boot 中使用异步线程时的 HttpServletRequest 复用问题记录

《在SpringBoot中使用异步线程时的HttpServletRequest复用问题记录》文章讨论了在SpringBoot中使用异步线程时,由于HttpServletRequest复用导致... 目录一、问题描述:异步线程操作导致请求复用时 Cookie 解析失败1. 场景背景2. 问题根源二、问题详细分

解读为什么@Autowired在属性上被警告,在setter方法上不被警告问题

《解读为什么@Autowired在属性上被警告,在setter方法上不被警告问题》在Spring开发中,@Autowired注解常用于实现依赖注入,它可以应用于类的属性、构造器或setter方法上,然... 目录1. 为什么 @Autowired 在属性上被警告?1.1 隐式依赖注入1.2 IDE 的警告:

解决java.lang.NullPointerException问题(空指针异常)

《解决java.lang.NullPointerException问题(空指针异常)》本文详细介绍了Java中的NullPointerException异常及其常见原因,包括对象引用为null、数组元... 目录Java.lang.NullPointerException(空指针异常)NullPointer

Android开发中gradle下载缓慢的问题级解决方法

《Android开发中gradle下载缓慢的问题级解决方法》本文介绍了解决Android开发中Gradle下载缓慢问题的几种方法,本文给大家介绍的非常详细,感兴趣的朋友跟随小编一起看看吧... 目录一、网络环境优化二、Gradle版本与配置优化三、其他优化措施针对android开发中Gradle下载缓慢的问

关于Nginx跨域问题及解决方案(CORS)

《关于Nginx跨域问题及解决方案(CORS)》文章主要介绍了跨域资源共享(CORS)机制及其在现代Web开发中的重要性,通过Nginx,可以简单地解决跨域问题,适合新手学习和应用,文章详细讲解了CO... 目录一、概述二、什么是 CORS?三、常见的跨域场景四、Nginx 如何解决 CORS 问题?五、基

python安装whl包并解决依赖关系的实现

《python安装whl包并解决依赖关系的实现》本文主要介绍了python安装whl包并解决依赖关系的实现,文中通过图文示例介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面... 目录一、什么是whl文件?二、我们为什么需要使用whl文件来安装python库?三、我们应该去哪儿下

MySQL安装时initializing database失败的问题解决

《MySQL安装时initializingdatabase失败的问题解决》本文主要介绍了MySQL安装时initializingdatabase失败的问题解决,文中通过图文介绍的非常详细,对大家的学... 目录问题页面:解决方法:问题页面:解决方法:1.勾选红框中的选项:2.将下图红框中全部改为英