首页
Python
Java
前端
数据库
Linux
Chatgpt专题
开发者工具箱
hadoop3.3专题
Centos7+Hadoop3.3.4+KDC1.15+Ranger2.4.0集成
一、集群规划 本次测试采用3台虚拟机,操作系统版本为centos7.6。 kerberos采用默认YUM源安装,版本为:1.15.1-55 Ranger版本为2.4.0 系统用户为ranger:ranger IP地址主机名KDCRanger192.168.121.101node101.cc.localKDC masterRanger Ad
阅读更多...
【Hadoop3.3.6全分布式环境搭建】
说明: 完成Hadoop全分布式环境搭建,需准备至少3台虚拟机(master slave01 slave02) 环境: VMWare + Centos7 + JDK1.8+ Hadoop3.3.6 主机规划: 主节点:master从节点:slave01 , slave02 一、准备工作 1、所有主机安装jdk 上传jdk-8u171-linux-x64.tar.gz到/ro
阅读更多...
Hadoop3.3.5云服务器安装教程-单机/伪分布式配置
系列文章目录 华为云服务器试用领取 领取的试用云服务器在哪 Hadoop3.3.5云服务器安装教程-单机/伪分布式配置 文章目录 系列文章目录创建hadoop用户更新apt安装SSH、配置SSH无密码登陆安装Java环境安装 Hadoop3.3.5Hadoop单机配置(非分布式)Hadoop伪分布式配置运行Hadoop伪分布式实例总结 本篇文章是基于上一篇所配置好的云
阅读更多...
IDEA 配置 hadoop3.3.1 开发环境
前言 适用于hadoop3.2以后的版本IDEA的安装见我之前的博文你需要安装并配置好了hadoop我的系统是Fedora35,但如果你是其他linux系统也应该适用本教程在Ubuntu 20.04 hadoop3.3.1 伪分布式配置下成功复现 创建一个maven项目 引入jar包 file-project settings-modules 点击加号,到hadoop安装目录/shar
阅读更多...
hadoop3.3.4安装及启动
1.虚拟机的安装 此处我选择的是VMware,激活码可以百度搜索,安装过程比较缓慢,需要耐心等待 --------------------------------------------------------------------------------------------------------------------------------- 2.创建新的虚拟机 点击创建虚
阅读更多...
Hadoop(01) Hadoop3.3.6安装教程,单机/伪分布式配置
在安装 Hadoop 3.3.6 前,需要满足以下前置条件: Java Development Kit (JDK):Hadoop 是用 Java 编写的,因此需要安装并配置适当版本的 JDK。Hadoop 3.3.6 建议使用 JDK 8 或更高版本。确保正确安装 JDK,并设置 JAVA_HOME 环境变量。 SSH:Hadoop 集群中的节点需要通过 SSH 进行通信和管理。确保在所有节
阅读更多...
Windows11编译Hadoop3.3.6源码
由于https://github.com/kontext-tech/winutils还未发布3.3.6版本,因此尝试源码编译 目录 环境和安装包准备,见2zlib编译方法一:方法二: 配置文件更改1. maven阿里云镜像2. Node版本3. 越过Javadoc检查 编译HadoopError,其他报错见3 环境和安装包准备,见2 Git-2.43.0-64-bit
阅读更多...