java.net.UnknownHostException 错误排查

2024-04-02 20:32

本文主要是介绍java.net.UnknownHostException 错误排查,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

x帅timeline项目起不来,连接phoenix的时候,报错java.net.UnknownHostException: beh,此错误以前遇到过,没有深入研究,大概上是因为无法找到hdfs的主机,一般上这个地址是在hdfs-site.xml和core-site.xml配置中配置的。

本机测试,发现没有问题,然后采用对比排除法(即逐步对比x帅的配置与自己的配置),最后因为这个坑,导致自己在替换的过程中,没有做到完全客观,忽略了resource路径下的hbase-site.xml文件,导致最后自己的项目在配置未更换的情况下也起不来了。

后更换164集群进行测试,结果依然。

还是怀疑是配置问题,但是已经没有线索,只能根据堆栈,生啃代码。
报错如下:

11:26:44.779 [main] WARN  c.b.m.t.p.DefaultPhoenixDataSource - Unable to connect to HBase store using Phoenix.
java.sql.SQLException: ERROR 103 (08004): Unable to establish connection.at org.apache.phoenix.exception.SQLExceptionCode$Factory$1.newException(SQLExceptionCode.java:422)at org.apache.phoenix.exception.SQLExceptionInfo.buildException(SQLExceptionInfo.java:145)at org.apache.phoenix.query.ConnectionQueryServicesImpl.openConnection(ConnectionQueryServicesImpl.java:393)at org.apache.phoenix.query.ConnectionQueryServicesImpl.access$300(ConnectionQueryServicesImpl.java:211)at org.apache.phoenix.query.ConnectionQueryServicesImpl$13.call(ConnectionQueryServicesImpl.java:2272)at org.apache.phoenix.query.ConnectionQueryServicesImpl$13.call(ConnectionQueryServicesImpl.java:2251)at org.apache.phoenix.util.PhoenixContextExecutor.call(PhoenixContextExecutor.java:78)at org.apache.phoenix.query.ConnectionQueryServicesImpl.init(ConnectionQueryServicesImpl.java:2251)at org.apache.phoenix.jdbc.PhoenixDriver.getConnectionQueryServices(PhoenixDriver.java:233)at org.apache.phoenix.jdbc.PhoenixEmbeddedDriver.createConnection(PhoenixEmbeddedDriver.java:135)at org.apache.phoenix.jdbc.PhoenixDriver.connect(PhoenixDriver.java:202)at java.sql.DriverManager.getConnection(DriverManager.java:664)at java.sql.DriverManager.getConnection(DriverManager.java:270)at com.bonc.manager.timeline.phoenix.DefaultPhoenixDataSource.getConnection(DefaultPhoenixDataSource.java:141)at com.bonc.manager.timeline.phoenix.PhoenixHBaseAccessor.getConnection(PhoenixHBaseAccessor.java:119)at com.bonc.manager.timeline.phoenix.PhoenixHBaseAccessor.initMetricSchema(PhoenixHBaseAccessor.java:143)at com.bonc.manager.timeline.phoenix.aggregate.TimelineMetricStore.init(TimelineMetricStore.java:36)at com.bonc.manager.timeline.listener.ApplicationStartup.initPhoenix(ApplicationStartup.java:35)at com.bonc.manager.timeline.listener.ApplicationStartup.onApplicationEvent(ApplicationStartup.java:28)at com.bonc.manager.timeline.listener.ApplicationStartup.onApplicationEvent(ApplicationStartup.java:1)at org.springframework.context.event.SimpleApplicationEventMulticaster.invokeListener(SimpleApplicationEventMulticaster.java:166)at org.springframework.context.event.SimpleApplicationEventMulticaster.multicastEvent(SimpleApplicationEventMulticaster.java:138)at org.springframework.context.support.AbstractApplicationContext.publishEvent(AbstractApplicationContext.java:382)at org.springframework.context.support.AbstractApplicationContext.publishEvent(AbstractApplicationContext.java:336)at org.springframework.context.support.AbstractApplicationContext.finishRefresh(AbstractApplicationContext.java:877)at org.springframework.boot.context.embedded.EmbeddedWebApplicationContext.finishRefresh(EmbeddedWebApplicationContext.java:144)at org.springframework.context.support.AbstractApplicationContext.refresh(AbstractApplicationContext.java:544)at org.springframework.boot.context.embedded.EmbeddedWebApplicationContext.refresh(EmbeddedWebApplicationContext.java:122)at org.springframework.boot.SpringApplication.refresh(SpringApplication.java:761)at org.springframework.boot.SpringApplication.refreshContext(SpringApplication.java:371)at org.springframework.boot.SpringApplication.run(SpringApplication.java:315)at com.bonc.manager.timeline.ApplicationService.main(ApplicationService.java:28)
Caused by: java.io.IOException: java.lang.reflect.InvocationTargetExceptionat org.apache.hadoop.hbase.client.ConnectionFactory.createConnection(ConnectionFactory.java:240)at org.apache.hadoop.hbase.client.ConnectionManager.createConnection(ConnectionManager.java:433)at org.apache.hadoop.hbase.client.ConnectionManager.createConnectionInternal(ConnectionManager.java:342)at org.apache.hadoop.hbase.client.HConnectionManager.createConnection(HConnectionManager.java:144)at org.apache.phoenix.query.HConnectionFactory$HConnectionFactoryImpl.createConnection(HConnectionFactory.java:47)at org.apache.phoenix.query.ConnectionQueryServicesImpl.openConnection(ConnectionQueryServicesImpl.java:390)... 29 common frames omitted
Caused by: java.lang.reflect.InvocationTargetException: nullat sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method)at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:62)at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)at java.lang.reflect.Constructor.newInstance(Constructor.java:423)at org.apache.hadoop.hbase.client.ConnectionFactory.createConnection(ConnectionFactory.java:238)... 34 common frames omitted
Caused by: java.lang.ExceptionInInitializerError: nullat org.apache.hadoop.hbase.ClusterId.parseFrom(ClusterId.java:64)at org.apache.hadoop.hbase.zookeeper.ZKClusterId.readClusterIdZNode(ZKClusterId.java:75)at org.apache.hadoop.hbase.client.ZooKeeperRegistry.getClusterId(ZooKeeperRegistry.java:105)at org.apache.hadoop.hbase.client.ConnectionManager$HConnectionImplementation.retrieveClusterId(ConnectionManager.java:919)at org.apache.hadoop.hbase.client.ConnectionManager$HConnectionImplementation.<init>(ConnectionManager.java:657)... 39 common frames omitted
Caused by: java.lang.IllegalArgumentException: java.net.UnknownHostException: behat org.apache.hadoop.security.SecurityUtil.buildTokenService(SecurityUtil.java:374)at org.apache.hadoop.hdfs.NameNodeProxies.createNonHAProxy(NameNodeProxies.java:310)at org.apache.hadoop.hdfs.NameNodeProxies.createProxy(NameNodeProxies.java:176)at org.apache.hadoop.hdfs.DFSClient.<init>(DFSClient.java:708)at org.apache.hadoop.hdfs.DFSClient.<init>(DFSClient.java:651)at org.apache.hadoop.hdfs.DistributedFileSystem.initialize(DistributedFileSystem.java:149)at org.apache.hadoop.fs.FileSystem.createFileSystem(FileSystem.java:2696)at org.apache.hadoop.fs.FileSystem.access$200(FileSystem.java:94)at org.apache.hadoop.fs.FileSystem$Cache.getInternal(FileSystem.java:2733)at org.apache.hadoop.fs.FileSystem$Cache.get(FileSystem.java:2715)at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:382)at org.apache.hadoop.fs.Path.getFileSystem(Path.java:296)at org.apache.hadoop.hbase.util.DynamicClassLoader.initTempDir(DynamicClassLoader.java:120)at org.apache.hadoop.hbase.util.DynamicClassLoader.<init>(DynamicClassLoader.java:98)at org.apache.hadoop.hbase.protobuf.ProtobufUtil.<clinit>(ProtobufUtil.java:241)... 44 common frames omitted
Caused by: java.net.UnknownHostException: beh... 59 common frames omitted

根据堆栈,主要问题是hdfs创建的时候无法解析域名,怀疑是配置文件的问题,首先确认了 org.apache.hadoop.fs.FileSystem.createFileSystem方法的参数conf中hbase.rootdir的配置确实为hdfs://beh/hbase;
然后跟踪conf初始化的地方为ProtobufUtil类,该类为protobuf通信工具类。
关键语句即为如下代码

    Configuration conf = HBaseConfiguration.create();

通过跟踪发现,conf会包含core-default.xml,hdfs-default.xml,hbase-default.xml,hbase-site.xml四个文件。
通过输出conf的配置值也能确认确实是这四个配置,现在的问题是这四个配置文件的位置。

因为phoenix连接只需要提供zookeeper地址,所以我一直以为配置文件存在zookeeper中,但查看zookeeper存储,并未发现这些配置。

没有线索,继续跟代码,通过跟踪发现,Configuration类的loadResource是最终加载配置的方法。
跟踪hbase-site.xml的加载过程,有意外发现,代码进入第一个else if,即配置参数被当成字符串处理,比较奇怪的是这个url,处理后该值是
F:\work\svn\BEH-Manager\BEH-Manager\BEH-Manager-timeline\target\classes\hbase-site.xml。

      if (resource instanceof URL) {                  // an URL resourcedoc = parse(builder, (URL)resource);} else if (resource instanceof String) {        // a CLASSPATH resourceURL url = getResource((String)resource);doc = parse(builder, url);

囧囧囧,原来是意外将hbase-site.xml放到resource中后,它意外的发挥了资源文件的作用,被hbase读取后引起问题。

将该配置文件挪到其他位置后,问题果然消失。

跟踪挪走后的配置加载,发现整个加载过程使用的都是默认配置,并未使用集群实际配置。
规到底,是对配置文件的加载理解不甚详细导致。

附:
在此需要感谢idea强大的跟踪源代码和debug能力,简单说两个使用的特点。
1. 自动反编译功能,就是将class文件反编译成java文件,并且可以断点跟踪。
2. 在1的基础上,自动下载源代码,进行匹配,这个也比较爽。

这篇关于java.net.UnknownHostException 错误排查的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/870979

相关文章

JVM 的类初始化机制

前言 当你在 Java 程序中new对象时,有没有考虑过 JVM 是如何把静态的字节码(byte code)转化为运行时对象的呢,这个问题看似简单,但清楚的同学相信也不会太多,这篇文章首先介绍 JVM 类初始化的机制,然后给出几个易出错的实例来分析,帮助大家更好理解这个知识点。 JVM 将字节码转化为运行时对象分为三个阶段,分别是:loading 、Linking、initialization

Spring Security 基于表达式的权限控制

前言 spring security 3.0已经可以使用spring el表达式来控制授权,允许在表达式中使用复杂的布尔逻辑来控制访问的权限。 常见的表达式 Spring Security可用表达式对象的基类是SecurityExpressionRoot。 表达式描述hasRole([role])用户拥有制定的角色时返回true (Spring security默认会带有ROLE_前缀),去

浅析Spring Security认证过程

类图 为了方便理解Spring Security认证流程,特意画了如下的类图,包含相关的核心认证类 概述 核心验证器 AuthenticationManager 该对象提供了认证方法的入口,接收一个Authentiaton对象作为参数; public interface AuthenticationManager {Authentication authenticate(Authenti

Spring Security--Architecture Overview

1 核心组件 这一节主要介绍一些在Spring Security中常见且核心的Java类,它们之间的依赖,构建起了整个框架。想要理解整个架构,最起码得对这些类眼熟。 1.1 SecurityContextHolder SecurityContextHolder用于存储安全上下文(security context)的信息。当前操作的用户是谁,该用户是否已经被认证,他拥有哪些角色权限…这些都被保

Spring Security基于数据库验证流程详解

Spring Security 校验流程图 相关解释说明(认真看哦) AbstractAuthenticationProcessingFilter 抽象类 /*** 调用 #requiresAuthentication(HttpServletRequest, HttpServletResponse) 决定是否需要进行验证操作。* 如果需要验证,则会调用 #attemptAuthentica

Spring Security 从入门到进阶系列教程

Spring Security 入门系列 《保护 Web 应用的安全》 《Spring-Security-入门(一):登录与退出》 《Spring-Security-入门(二):基于数据库验证》 《Spring-Security-入门(三):密码加密》 《Spring-Security-入门(四):自定义-Filter》 《Spring-Security-入门(五):在 Sprin

Java架构师知识体认识

源码分析 常用设计模式 Proxy代理模式Factory工厂模式Singleton单例模式Delegate委派模式Strategy策略模式Prototype原型模式Template模板模式 Spring5 beans 接口实例化代理Bean操作 Context Ioc容器设计原理及高级特性Aop设计原理Factorybean与Beanfactory Transaction 声明式事物

Java进阶13讲__第12讲_1/2

多线程、线程池 1.  线程概念 1.1  什么是线程 1.2  线程的好处 2.   创建线程的三种方式 注意事项 2.1  继承Thread类 2.1.1 认识  2.1.2  编码实现  package cn.hdc.oop10.Thread;import org.slf4j.Logger;import org.slf4j.LoggerFactory

JAVA智听未来一站式有声阅读平台听书系统小程序源码

智听未来,一站式有声阅读平台听书系统 🌟&nbsp;开篇:遇见未来,从“智听”开始 在这个快节奏的时代,你是否渴望在忙碌的间隙,找到一片属于自己的宁静角落?是否梦想着能随时随地,沉浸在知识的海洋,或是故事的奇幻世界里?今天,就让我带你一起探索“智听未来”——这一站式有声阅读平台听书系统,它正悄悄改变着我们的阅读方式,让未来触手可及! 📚&nbsp;第一站:海量资源,应有尽有 走进“智听

poj 1258 Agri-Net(最小生成树模板代码)

感觉用这题来当模板更适合。 题意就是给你邻接矩阵求最小生成树啦。~ prim代码:效率很高。172k...0ms。 #include<stdio.h>#include<algorithm>using namespace std;const int MaxN = 101;const int INF = 0x3f3f3f3f;int g[MaxN][MaxN];int n