hadoop创建两大错误：Bad connection to FS. command aborted. exception和Shutting down NameNod......

2024-01-06 19:40
文章标签 创建 错误 connection hadoop fs bad 两大 exception command aborted shutting namenod

本文主要是介绍hadoop创建两大错误：Bad connection to FS. command aborted. exception和Shutting down NameNod......，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

我的hadoop启动后，各个节点都正常，但是无法查看hdfs目录，错误提示

 Bad connection to FS. command aborted.  查了下网上的解决办法，主要是删除tmp下的所有文件，然后格式化就可以了。

原文：http://www.tuicool.com/articles/J7R3mei

 

问题目录表：

Bad connection to FS. command aborted. exception: Call to localhost/127.0.0.1:8888

failed on connection exception: java.net.ConnectException: Connection refused

 遇到错误：

Error代码   收藏代码

  1. 11 / 08 / 18   14 : 56 : 37  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  2. . 1 : 8888 . Already tried  0  time(s).  
  3. 11 / 08 / 18   14 : 56 : 39  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  4. . 1 : 8888 . Already tried  1  time(s).  
  5. 11 / 08 / 18   14 : 56 : 41  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  6. . 1 : 8888 . Already tried  2  time(s).  
  7. 11 / 08 / 18   14 : 56 : 43  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  8. . 1 : 8888 . Already tried  3  time(s).  
  9. 11 / 08 / 18   14 : 56 : 45  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  10. . 1 : 8888 . Already tried  4  time(s).  
  11. 11 / 08 / 18   14 : 56 : 47  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  12. . 1 : 8888 . Already tried  5  time(s).  
  13. 11 / 08 / 18   14 : 56 : 49  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  14. . 1 : 8888 . Already tried  6  time(s).  
  15. 11 / 08 / 18   14 : 56 : 51  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  16. . 1 : 8888 . Already tried  7  time(s).  
  17. 11 / 08 / 18   14 : 56 : 53  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  18. . 1 : 8888 . Already tried  8  time(s).  
  19. 11 / 08 / 18   14 : 56 : 55  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  20. . 1 : 8888 . Already tried  9  time(s).  

Error代码   收藏代码

  1. Bad connection to FS. command aborted. exception : Call to localhost/ 127.0 . 0.1: 88   
  2. 88 failed on connection exception: java.net.ConnectException: Connection refused  
  3. : no further information  
  4. <span style= "color: #ff0000;" >  
  5. </span>  

错误提示“Bad connection to FS. command aborted. exception: Call to localhost/127.0.0.1:88

88 failed on connection exception: java.net.ConnectException: Connection refused

: no further information”

 起初怀疑是fs服务没有启动，但反复关闭启动多次后仍没用，请教高手后，被建议重新格式化namenode，就可以了。

格式化指令如下（在hadoop的bin目录下）：

Shell代码   收藏代码

  1. $ ./hadoop namenode -format  

成功 之后重启hadoop就可以了

2，如果显示的像一下错误信息：

Error代码   收藏代码

  1. $ bin/hadoop fs -ls /  
  2. 11 / 08 / 18   17 : 02 : 35  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  3. . 1 : 9000 . Already tried  0  time(s).  
  4. 11 / 08 / 18   17 : 02 : 37  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  5. . 1 : 9000 . Already tried  1  time(s).  
  6. 11 / 08 / 18   17 : 02 : 39  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  7. . 1 : 9000 . Already tried  2  time(s).  
  8. 11 / 08 / 18   17 : 02 : 41  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  9. . 1 : 9000 . Already tried  3  time(s).  
  10. 11 / 08 / 18   17 : 02 : 43  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  11. . 1 : 9000 . Already tried  4  time(s).  
  12. 11 / 08 / 18   17 : 02 : 45  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  13. . 1 : 9000 . Already tried  5  time(s).  
  14. 11 / 08 / 18   17 : 02 : 46  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  15. . 1 : 9000 . Already tried  6  time(s).  
  16. 11 / 08 / 18   17 : 02 : 48  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  17. . 1 : 9000 . Already tried  7  time(s).  
  18. 11 / 08 / 18   17 : 02 : 50  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  19. . 1 : 9000 . Already tried  8  time(s).  
  20. 11 / 08 / 18   17 : 02 : 52  INFO ipc.Client: Retrying connect to server: localhost/127.0 . 0   
  21. . 1 : 9000 . Already tried  9  time(s).  

Error代码   收藏代码

  1. Bad connection to FS. command aborted.  

错误提示“Bad connection to FS. command aborted.”

  把你DataNode上的DFS数据全删了，再重新格式化NameNode。

 即：先将你D盘下tmp目录下所有文件删了，在重复上面第一点的过程

3, 在cygwin上执行wordcount时报FileNotFoundException

原因： tmp路径有问题。配置文件mapred-site.xml中mapred.child.tmp默认是"./tmp"，在windows里会出问题

解决：将其改为D:/tmp（这个是windows下默认的，听说改成其他绝对路径也可以，会自动创建），之后重启hadoop即可

转载于:https://www.cnblogs.com/catWang/p/4013410.html

这篇关于hadoop创建两大错误：Bad connection to FS. command aborted. exception和Shutting down NameNod......的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！


http://www.chinasem.cn/article/577396。

相关文章

Hadoop企业开发案例调优场景

Hadoop企业开发案例调优场景

需求 （1）需求：从1G数据中，统计每个单词出现次数。服务器3台，每台配置4G内存，4核CPU，4线程。 （2）需求分析： 1G / 128m = 8个MapTask；1个ReduceTask；1个mrAppMaster 平均每个节点运行10个 / 3台 ≈ 3个任务（4    3    3） HDFS参数调优 （1）修改：hadoop-env.sh export HDFS_NAMENOD
阅读更多...
Hadoop集群数据均衡之磁盘间数据均衡

Hadoop集群数据均衡之磁盘间数据均衡

生产环境，由于硬盘空间不足，往往需要增加一块硬盘。刚加载的硬盘没有数据时，可以执行磁盘数据均衡命令。（Hadoop3.x新特性） plan后面带的节点的名字必须是已经存在的，并且是需要均衡的节点。 如果节点不存在，会报如下错误： 如果节点只有一个硬盘的话，不会创建均衡计划： （1）生成均衡计划 hdfs diskbalancer -plan hadoop102 （2）执行均衡计划 hd
阅读更多...
hadoop开启回收站配置

hadoop开启回收站配置

开启回收站功能，可以将删除的文件在不超时的情况下，恢复原数据，起到防止误删除、备份等作用。 开启回收站功能参数说明 （1）默认值fs.trash.interval = 0，0表示禁用回收站；其他值表示设置文件的存活时间。 （2）默认值fs.trash.checkpoint.interval = 0，检查回收站的间隔时间。如果该值为0，则该值设置和fs.trash.interval的参数值相等。
阅读更多...
Hadoop数据压缩使用介绍

Hadoop数据压缩使用介绍

一、压缩原则 （1）运算密集型的Job，少用压缩 （2）IO密集型的Job，多用压缩 二、压缩算法比较 三、压缩位置选择 四、压缩参数配置 1）为了支持多种压缩/解压缩算法，Hadoop引入了编码/解码器 2）要在Hadoop中启用压缩，可以配置如下参数
阅读更多...
【Python编程】Linux创建虚拟环境并配置与notebook相连接

【Python编程】Linux创建虚拟环境并配置与notebook相连接

1.创建 使用 venv 创建虚拟环境。例如，在当前目录下创建一个名为 myenv 的虚拟环境： python3 -m venv myenv 2.激活 激活虚拟环境使其成为当前终端会话的活动环境。运行： source myenv/bin/activate 3.与notebook连接 在虚拟环境中，使用 pip 安装 Jupyter 和 ipykernel： pip instal
阅读更多...
在cscode中通过maven创建java项目

在cscode中通过maven创建java项目

在cscode中创建java项目 可以通过博客完成maven的导入 建立maven项目 使用快捷键 Ctrl + Shift + P 建立一个 Maven 项目 1 Ctrl + Shift + P 打开输入框2 输入 "> java create"3 选择 maven4 选择 No Archetype5 输入 域名6 输入项目名称7 建立一个文件目录存放项目，文件名一般为项目名8 确定
阅读更多...
Java 创建图形用户界面（GUI）入门指南（Swing库 JFrame 类）概述

Java 创建图形用户界面（GUI）入门指南（Swing库 JFrame 类）概述

概述 基本概念 Java Swing 的架构 Java Swing 是一个为 Java 设计的 GUI 工具包，是 JAVA 基础类的一部分，基于 Java AWT 构建，提供了一系列轻量级、可定制的图形用户界面（GUI）组件。 与 AWT 相比，Swing 提供了许多比 AWT 更好的屏幕显示元素，更加灵活和可定制，具有更好的跨平台性能。 组件和容器 Java Swing 提供了许多
阅读更多...
顺序表之创建，判满，插入，输出

顺序表之创建，判满，插入，输出

文章目录 🍊自我介绍🍊创建一个空的顺序表，为结构体在堆区分配空间🍊插入数据🍊输出数据🍊判断顺序表是否满了，满了返回值1，否则返回0🍊main函数 你的点赞评论就是对博主最大的鼓励 当然喜欢的小伙伴可以：点赞+关注+评论+收藏（一键四连）哦~ 🍊自我介绍   Hello,大家好，我是小珑也要变强（也是小珑），我是易编程·终身成长社群的一名“创始团队·嘉宾”
阅读更多...
Maven创建项目中的groupId, artifactId, 和 version的意思

Maven创建项目中的groupId, artifactId, 和 version的意思

文章目录 groupIdartifactIdversionname groupId 定义：groupId 是 Maven 项目坐标的第一个部分，它通常表示项目的组织或公司的域名反转写法。例如，如果你为公司 example.com 开发软件，groupId 可能是 com.example。作用：groupId 被用来组织和分组相关的 Maven artifacts，这样可以避免
阅读更多...
批处理以当前时间为文件名创建文件

批处理以当前时间为文件名创建文件

批处理以当前时间为文件名创建文件 批处理创建空文件 有时候，需要创建以当前时间命名的文件，手动输入当然可以，但是有更省心的方法吗？ 假设我是 windows 操作系统，打开命令行。 输入以下命令试试： echo %date:~0,4%_%date:~5,2%_%date:~8,2%_%time:~0,2%_%time:~3,2%_%time:~6,2% 输出类似： 2019_06
阅读更多...

Copyright China编程 23002807@qq.com

沪ICP备2023033072号-2