14.2 Storm部署搭建

2024-06-07 19:08
文章标签 部署 搭建 storm 14.2

本文主要是介绍14.2 Storm部署搭建,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

单机版:

1,上传apache-storm-0.9.5.tar.gz (前提需要有java环境)

2,解压 tar -zxvf apache-storm-0.9.5.tar.gz

3,cd apache-storm-0.9.5 进入解压目录

4,mkdir logs 在目录当中创建一个logs文件夹

5,./bin/storm dev-zookeeper >> ./logs/zk.out 2>&1 & 启动自带的zookeeper

6,./bin/storm nimbus >> ./logs/nimbus.out 2>&1 & 启动nimbus

7,./bin/storm ui >> ./logs/ui.out 2>&1 & 启动ui 一般和nimbus 在一台机子上

8,./bin/storm supervisor >> ./logs/supervisor.out 2>&1 & 启动supervisor,可以启动多个,再运行一次就行

9,./bin/storm logviewer >> ./logs/logviewer.out 2>&1 & 启动logviewer,在UI上可以查看日志

验证:访问http://node2:8080

单机版的步骤,storm自带了一个开发版的ZK,也不需要自己去部署,配置都不需要,极其简单 的,这也是Storm的一个好处,基本上是开箱即用的,单机环境虽然没有什么实际的价值,但是 在简单的测试上还是很有用的

./bin/storm jar /opt/local/storm.jar com.yuntian.test.StromTest workcount 上传jar包进行测试,传参数workcount


集群模式搭建:

修改配置文件conf/storm.yaml

storm.zookeeper.servers:

- "node2"

- "node3"

- "node4"

storm.zookeeper.port: 4180 当zookeeper不是默认端口需要配置端口

nimbus.host: "node2" 设置nimbus节点

scp -r apache-storm-0.9.5 root@node3:`pwd` 复制到其他几个节点 注意删除storm-local文件夹

1,启动zookeeper集群

2,在node2上启动nimbus:./bin/storm nimbus >> ./logs/nimbus.out 2>&1 &

3,在node2上启动ui :./bin/storm ui >> ./logs/ui.out 2>&1 &

4,可以在node3,node4上分别启动一个supervisor :./bin/storm supervisor >> ./logs/supervisor.out 2>&1 &

5,./bin/storm logviewer >> ./logs/logviewer.out 2>&1 & 启动logviewer,在UI上可以查看日志,和supervisor 同步

随便在一个节点node3,node4上:./bin/storm jar /opt/local/storm.jar com.yuntian.test.StromTest workcount 上传jar包进行测试,传参数workcount

http://node2:8080

这篇关于14.2 Storm部署搭建的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1040039

相关文章

使用Python实现快速搭建本地HTTP服务器

《使用Python实现快速搭建本地HTTP服务器》:本文主要介绍如何使用Python快速搭建本地HTTP服务器,轻松实现一键HTTP文件共享,同时结合二维码技术,让访问更简单,感兴趣的小伙伴可以了... 目录1. 概述2. 快速搭建 HTTP 文件共享服务2.1 核心思路2.2 代码实现2.3 代码解读3.

MySQL双主搭建+keepalived高可用的实现

《MySQL双主搭建+keepalived高可用的实现》本文主要介绍了MySQL双主搭建+keepalived高可用的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,... 目录一、测试环境准备二、主从搭建1.创建复制用户2.创建复制关系3.开启复制,确认复制是否成功4.同

tomcat多实例部署的项目实践

《tomcat多实例部署的项目实践》Tomcat多实例是指在一台设备上运行多个Tomcat服务,这些Tomcat相互独立,本文主要介绍了tomcat多实例部署的项目实践,具有一定的参考价值,感兴趣的可... 目录1.创建项目目录,测试文China编程件2js.创建实例的安装目录3.准备实例的配置文件4.编辑实例的

SpringBoot配置Ollama实现本地部署DeepSeek

《SpringBoot配置Ollama实现本地部署DeepSeek》本文主要介绍了在本地环境中使用Ollama配置DeepSeek模型,并在IntelliJIDEA中创建一个Sprin... 目录前言详细步骤一、本地配置DeepSeek二、SpringBoot项目调用本地DeepSeek前言随着人工智能技

通过Docker Compose部署MySQL的详细教程

《通过DockerCompose部署MySQL的详细教程》DockerCompose作为Docker官方的容器编排工具,为MySQL数据库部署带来了显著优势,下面小编就来为大家详细介绍一... 目录一、docker Compose 部署 mysql 的优势二、环境准备与基础配置2.1 项目目录结构2.2 基

CentOS 7部署主域名服务器 DNS的方法

《CentOS7部署主域名服务器DNS的方法》文章详细介绍了在CentOS7上部署主域名服务器DNS的步骤,包括安装BIND服务、配置DNS服务、添加域名区域、创建区域文件、配置反向解析、检查配置... 目录1. 安装 BIND 服务和工具2.  配置 BIND 服务3 . 添加你的域名区域配置4.创建区域

OpenManus本地部署实战亲测有效完全免费(最新推荐)

《OpenManus本地部署实战亲测有效完全免费(最新推荐)》文章介绍了如何在本地部署OpenManus大语言模型,包括环境搭建、LLM编程接口配置和测试步骤,本文给大家讲解的非常详细,感兴趣的朋友一... 目录1.概况2.环境搭建2.1安装miniconda或者anaconda2.2 LLM编程接口配置2

大数据spark3.5安装部署之local模式详解

《大数据spark3.5安装部署之local模式详解》本文介绍了如何在本地模式下安装和配置Spark,并展示了如何使用SparkShell进行基本的数据处理操作,同时,还介绍了如何通过Spark-su... 目录下载上传解压配置jdk解压配置环境变量启动查看交互操作命令行提交应用spark,一个数据处理框架

使用DeepSeek搭建个人知识库(在笔记本电脑上)

《使用DeepSeek搭建个人知识库(在笔记本电脑上)》本文介绍了如何在笔记本电脑上使用DeepSeek和开源工具搭建个人知识库,通过安装DeepSeek和RAGFlow,并使用CherryStudi... 目录部署环境软件清单安装DeepSeek安装Cherry Studio安装RAGFlow设置知识库总

Linux搭建Mysql主从同步的教程

《Linux搭建Mysql主从同步的教程》:本文主要介绍Linux搭建Mysql主从同步的教程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录linux搭建mysql主从同步1.启动mysql服务2.修改Mysql主库配置文件/etc/my.cnf3.重启主库my