(光速上手)Docker搭建kafka单机版

2024-02-29 09:58

本文主要是介绍(光速上手)Docker搭建kafka单机版,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

kafka运行依赖于zookeeper,所以要先搭建zookeeper!

1.启动zookeeper服务

docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeeper

2.启动kafka服务

记得修改命令中的zookeeper的ip地址和kafka所在的主机ip地址

docker run -d --name kafka  --publish 9092:9092 --link zookeeper  --env KAFKA_ZOOKEEPER_CONNECT=172.18.12.182:2181 --env KAFKA_ADVERTISED_HOST_NAME=172.18.12.182 --env KAFKA_ADVERTISED_PORT=9092  --volume /etc/localtime:/etc/localtime wurstmeister/kafka:latest
解释:
docker run -d --name kafka 
--publish 9092:9092 // 端口绑定
--link zookeeper // 连接zookeeper
--env KAFKA_ZOOKEEPER_CONNECT=172.18.12.182:2181 // 配置zookeeper的地址+ip
--env KAFKA_ADVERTISED_HOST_NAME=172.18.12.182 // 主机地址
--env KAFKA_ADVERTISED_PORT=9092 // kafka的ip
--volume /etc/localtime:/etc/localtime // 本地磁盘挂载
wurstmeister/kafka:latest // 镜像名字

3.测试

进入容器并且启动发送方和消费者
1.进入kafka容器

docker exec -it kafka /bin/bash

2.创建名为test的主题(topic)

bin/kafka-topics.sh --create --zookeeper 172.18.12.182:2181 --replication-factor 1 --partitions 1 --topic test

3.打开消费者—开始监听消费消息

bin/kafka-console-consumer.sh --bootstrap-server 172.18.12.182:9092 --topic test --from-beginning

4.新打开一个ssh窗口,进入容器,打开消息发送者,发送消息

kafka-console-producer.sh --broker-list 172.18.12.182:9092 --topic test

在这里插入图片描述

此时消费方已经能接受到发送方发的消息了,搭建成功!!!

在这里插入图片描述

附:搭建UI监控—kafka-eagle,颜值还可以哦~

在这里插入图片描述
1.下载安装包

wget https://github.com/smartloli/kafka-eagle-bin/archive/v1.3.7.tar.gz

2.解压并且修改配置文件conf/system-config.properties

配置zookeeper
kafka.eagle.zk.cluster.alias=cluster1
cluster1.zk.list=192.168.10.14:2181
配置端口
kafka.eagle.webui.port=10092
配置数据库
kafka.eagle.driver=com.mysql.jdbc.Driver
kafka.eagle.url=jdbc:mysql://rm-wz9p90b2992j8b4e2xo.mysql.rds.aliyuncs.com:3306/ke?useUnicode=true&characterEncoding=UTF-8&zeroDateTimeBehavior=convertToNull
kafka.eagle.username=k8sadmin
kafka.eagle.password=xxxxxxx

3.配置linux环境变量PATH

vi /etc/profile
#java home
export PATH USER LOGNAME MAIL HOSTNAME HISTSIZE HISTCONTROL
export JAVA_HOME=/usr/java-jdk-home/jdk1.8.0_211
export PATH=$JAVA_HOME/bin:$PATH
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar#kafka home
export KE_HOME=/huanglei/sofrware/kafka-eagle
export PATH=$PATH:$KE_HOME/bin:$JAVA_HOME/bin

4.授权并且启动,成功后会打印出用户名密码 url等

chmod 777 *
bin/ke.sh start stop 

5.登录(默认)

*用户名:admin 
*密  码:123456

在这里插入图片描述

这篇关于(光速上手)Docker搭建kafka单机版的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/758381

相关文章

Java中Springboot集成Kafka实现消息发送和接收功能

《Java中Springboot集成Kafka实现消息发送和接收功能》Kafka是一个高吞吐量的分布式发布-订阅消息系统,主要用于处理大规模数据流,它由生产者、消费者、主题、分区和代理等组件构成,Ka... 目录一、Kafka 简介二、Kafka 功能三、POM依赖四、配置文件五、生产者六、消费者一、Kaf

Kafka拦截器的神奇操作方法

《Kafka拦截器的神奇操作方法》Kafka拦截器是一种强大的机制,用于在消息发送和接收过程中插入自定义逻辑,它们可以用于消息定制、日志记录、监控、业务逻辑集成、性能统计和异常处理等,本文介绍Kafk... 目录前言拦截器的基本概念Kafka 拦截器的定义和基本原理:拦截器是 Kafka 消息传递的不可或缺

Mycat搭建分库分表方式

《Mycat搭建分库分表方式》文章介绍了如何使用分库分表架构来解决单表数据量过大带来的性能和存储容量限制的问题,通过在一对主从复制节点上配置数据源,并使用分片算法将数据分配到不同的数据库表中,可以有效... 目录分库分表解决的问题分库分表架构添加数据验证结果 总结分库分表解决的问题单表数据量过大带来的性能

Java汇编源码如何查看环境搭建

《Java汇编源码如何查看环境搭建》:本文主要介绍如何在IntelliJIDEA开发环境中搭建字节码和汇编环境,以便更好地进行代码调优和JVM学习,首先,介绍了如何配置IntelliJIDEA以方... 目录一、简介二、在IDEA开发环境中搭建汇编环境2.1 在IDEA中搭建字节码查看环境2.1.1 搭建步

更改docker默认数据目录的方法步骤

《更改docker默认数据目录的方法步骤》本文主要介绍了更改docker默认数据目录的方法步骤,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一... 目录1.查看docker是否存在并停止该服务2.挂载镜像并安装rsync便于备份3.取消挂载备份和迁

Docker集成CI/CD的项目实践

《Docker集成CI/CD的项目实践》本文主要介绍了Docker集成CI/CD的项目实践,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学... 目录一、引言1.1 什么是 CI/CD?1.2 docker 在 CI/CD 中的作用二、Docke

如何在一台服务器上使用docker运行kafka集群

《如何在一台服务器上使用docker运行kafka集群》文章详细介绍了如何在一台服务器上使用Docker运行Kafka集群,包括拉取镜像、创建网络、启动Kafka容器、检查运行状态、编写启动和关闭脚本... 目录1.拉取镜像2.创建集群之间通信的网络3.将zookeeper加入到网络中4.启动kafka集群

Python基于火山引擎豆包大模型搭建QQ机器人详细教程(2024年最新)

《Python基于火山引擎豆包大模型搭建QQ机器人详细教程(2024年最新)》:本文主要介绍Python基于火山引擎豆包大模型搭建QQ机器人详细的相关资料,包括开通模型、配置APIKEY鉴权和SD... 目录豆包大模型概述开通模型付费安装 SDK 环境配置 API KEY 鉴权Ark 模型接口Prompt

IDEA中的Kafka管理神器详解

《IDEA中的Kafka管理神器详解》这款基于IDEA插件实现的Kafka管理工具,能够在本地IDE环境中直接运行,简化了设置流程,为开发者提供了更加紧密集成、高效且直观的Kafka操作体验... 目录免安装:IDEA中的Kafka管理神器!简介安装必要的插件创建 Kafka 连接第一步:创建连接第二步:选

鸿蒙开发搭建flutter适配的开发环境

《鸿蒙开发搭建flutter适配的开发环境》文章详细介绍了在Windows系统上如何创建和运行鸿蒙Flutter项目,包括使用flutterdoctor检测环境、创建项目、编译HAP包以及在真机上运... 目录环境搭建创建运行项目打包项目总结环境搭建1.安装 DevEco Studio NEXT IDE