Kafka 安装配置

栏目: IT技术 · 发布时间: 6年前 · 151

Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和 Java 编写。该项目的目标是为处理实时数据提供一个统一、高吞吐、低延迟的平台。其持久化层本质上是一个“按照分布式事务日志架构的大规模发布/订阅消息队列”,这使它作为企业级基础设施来处理流式数据非常有价值。

Windows 安装

由于 Kafka 依赖于 ookeeper 所以我们先安装 Zookeeper

安装 Zookeeper

下载地址

Zookeeper官网

下载地址

解压并复制到工作目录

我们在这里安装最新的 apache-zookeeper-3.5.5.tar.gz

复制到工作目录,例如:D:\apache-zookeeper-3.5.5

修改配置参数

进到 D:\apache-zookeeper-3.5.5\conf, 复制 zoo_sample.cfg 并重命名为 zoo.cfg

编辑 zoo.cfg,修改 dataDir 为:

dataDir=/apache-zookeeper-3.5.5/data

添加环境变量

ZOOKEEPER_HOME              D:\apache-zookeeper-3.5.5
path                        %ZOOKEEPER_HOME%\bin

打开terminal,尝试运行:

$ zkserver

…没有java环境变量?

我这里提示 Error: JAVA_HOME is not set.
添加一下JAVA_HOME环境变量

又出错了。。。

Error: Could not find or load main class org.apache.zookeeper.server.quorum.QuorumPeerMain

中文是

错误: 找不到或无法加载主类 org.apache.zookeeper.server.quorum.QuorumPeerMain
$ zookeeper-server-start.bat ../../config/zookeeper.properties
$ kafka-server-start.bat ../../config/server.properties

.\bin\windows\kafka-server-start.bat .\config\server.properties
.\kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic testDemo
.\kafka-console-producer.bat --broker-list localhost:9092 --topic testDemo
.\kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic testDemo
猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

程序员的修炼

程序员的修炼

Jeff Atwood / 陆其明、杨溢 / 人民邮电出版社 / 2014-4 / 45.00元

《程序员的修炼——从优秀到卓越》是《高效能程序员的修炼》的姊妹篇,包含了Coding Horror博客中的精华文章。全书分为8章,涵盖了时间管理、编程方法、Web设计、测试、用户需求、互联网、游戏编程以及技术阅读等方面的话题。作者选取的话题,无一不是程序员职业生涯中的痛点。很多文章在博客和网络上的点击率和回帖率居高不下。 Jeff Atwood于2004年创办Coding Horror博客(......一起来看看 《程序员的修炼》 这本书的介绍吧!

图片转BASE64编码

图片转BASE64编码

在线图片转Base64编码工具

SHA 加密

SHA 加密

SHA 加密工具

HEX CMYK 转换工具

HEX CMYK 转换工具

HEX CMYK 互转工具