14.2 Storm部署搭建

2024-06-07 19:08
文章标签 部署 搭建 storm 14.2

本文主要是介绍14.2 Storm部署搭建,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

单机版:

1,上传apache-storm-0.9.5.tar.gz (前提需要有java环境)

2,解压 tar -zxvf apache-storm-0.9.5.tar.gz

3,cd apache-storm-0.9.5 进入解压目录

4,mkdir logs 在目录当中创建一个logs文件夹

5,./bin/storm dev-zookeeper >> ./logs/zk.out 2>&1 & 启动自带的zookeeper

6,./bin/storm nimbus >> ./logs/nimbus.out 2>&1 & 启动nimbus

7,./bin/storm ui >> ./logs/ui.out 2>&1 & 启动ui 一般和nimbus 在一台机子上

8,./bin/storm supervisor >> ./logs/supervisor.out 2>&1 & 启动supervisor,可以启动多个,再运行一次就行

9,./bin/storm logviewer >> ./logs/logviewer.out 2>&1 & 启动logviewer,在UI上可以查看日志

验证:访问http://node2:8080

单机版的步骤,storm自带了一个开发版的ZK,也不需要自己去部署,配置都不需要,极其简单 的,这也是Storm的一个好处,基本上是开箱即用的,单机环境虽然没有什么实际的价值,但是 在简单的测试上还是很有用的

./bin/storm jar /opt/local/storm.jar com.yuntian.test.StromTest workcount 上传jar包进行测试,传参数workcount


集群模式搭建:

修改配置文件conf/storm.yaml

storm.zookeeper.servers:

- "node2"

- "node3"

- "node4"

storm.zookeeper.port: 4180 当zookeeper不是默认端口需要配置端口

nimbus.host: "node2" 设置nimbus节点

scp -r apache-storm-0.9.5 root@node3:`pwd` 复制到其他几个节点 注意删除storm-local文件夹

1,启动zookeeper集群

2,在node2上启动nimbus:./bin/storm nimbus >> ./logs/nimbus.out 2>&1 &

3,在node2上启动ui :./bin/storm ui >> ./logs/ui.out 2>&1 &

4,可以在node3,node4上分别启动一个supervisor :./bin/storm supervisor >> ./logs/supervisor.out 2>&1 &

5,./bin/storm logviewer >> ./logs/logviewer.out 2>&1 & 启动logviewer,在UI上可以查看日志,和supervisor 同步

随便在一个节点node3,node4上:./bin/storm jar /opt/local/storm.jar com.yuntian.test.StromTest workcount 上传jar包进行测试,传参数workcount

http://node2:8080

这篇关于14.2 Storm部署搭建的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1040039

相关文章

k8s部署MongDB全过程

《k8s部署MongDB全过程》文章介绍了如何在Kubernetes集群中部署MongoDB,包括环境准备、创建Secret、创建服务和Deployment,并通过Robo3T工具测试连接... 目录一、环境准备1.1 环境说明1.2 创建 namespace1.3 创建mongdb账号/密码二、创建Sec

Java中的Opencv简介与开发环境部署方法

《Java中的Opencv简介与开发环境部署方法》OpenCV是一个开源的计算机视觉和图像处理库,提供了丰富的图像处理算法和工具,它支持多种图像处理和计算机视觉算法,可以用于物体识别与跟踪、图像分割与... 目录1.Opencv简介Opencv的应用2.Java使用OpenCV进行图像操作opencv安装j

将Python应用部署到生产环境的小技巧分享

《将Python应用部署到生产环境的小技巧分享》文章主要讲述了在将Python应用程序部署到生产环境之前,需要进行的准备工作和最佳实践,包括心态调整、代码审查、测试覆盖率提升、配置文件优化、日志记录完... 目录部署前夜:从开发到生产的心理准备与检查清单环境搭建:打造稳固的应用运行平台自动化流水线:让部署像

Python项目打包部署到服务器的实现

《Python项目打包部署到服务器的实现》本文主要介绍了PyCharm和Ubuntu服务器部署Python项目,包括打包、上传、安装和设置自启动服务的步骤,具有一定的参考价值,感兴趣的可以了解一下... 目录一、准备工作二、项目打包三、部署到服务器四、设置服务自启动一、准备工作开发环境:本文以PyChar

centos7基于keepalived+nginx部署k8s1.26.0高可用集群

《centos7基于keepalived+nginx部署k8s1.26.0高可用集群》Kubernetes是一个开源的容器编排平台,用于自动化地部署、扩展和管理容器化应用程序,在生产环境中,为了确保集... 目录一、初始化(所有节点都执行)二、安装containerd(所有节点都执行)三、安装docker-

在Ubuntu上部署SpringBoot应用的操作步骤

《在Ubuntu上部署SpringBoot应用的操作步骤》随着云计算和容器化技术的普及,Linux服务器已成为部署Web应用程序的主流平台之一,Java作为一种跨平台的编程语言,具有广泛的应用场景,本... 目录一、部署准备二、安装 Java 环境1. 安装 JDK2. 验证 Java 安装三、安装 mys

Mycat搭建分库分表方式

《Mycat搭建分库分表方式》文章介绍了如何使用分库分表架构来解决单表数据量过大带来的性能和存储容量限制的问题,通过在一对主从复制节点上配置数据源,并使用分片算法将数据分配到不同的数据库表中,可以有效... 目录分库分表解决的问题分库分表架构添加数据验证结果 总结分库分表解决的问题单表数据量过大带来的性能

Java汇编源码如何查看环境搭建

《Java汇编源码如何查看环境搭建》:本文主要介绍如何在IntelliJIDEA开发环境中搭建字节码和汇编环境,以便更好地进行代码调优和JVM学习,首先,介绍了如何配置IntelliJIDEA以方... 目录一、简介二、在IDEA开发环境中搭建汇编环境2.1 在IDEA中搭建字节码查看环境2.1.1 搭建步

Jenkins中自动化部署Spring Boot项目的全过程

《Jenkins中自动化部署SpringBoot项目的全过程》:本文主要介绍如何使用Jenkins从Git仓库拉取SpringBoot项目并进行自动化部署,通过配置Jenkins任务,实现项目的... 目录准备工作启动 Jenkins配置 Jenkins创建及配置任务源码管理构建触发器构建构建后操作构建任务

Python基于火山引擎豆包大模型搭建QQ机器人详细教程(2024年最新)

《Python基于火山引擎豆包大模型搭建QQ机器人详细教程(2024年最新)》:本文主要介绍Python基于火山引擎豆包大模型搭建QQ机器人详细的相关资料,包括开通模型、配置APIKEY鉴权和SD... 目录豆包大模型概述开通模型付费安装 SDK 环境配置 API KEY 鉴权Ark 模型接口Prompt