zoukankan      html  css  js  c++  java
  • windows环境下搭建kafka

    注意:请确保本地Java环境变量配置成功

    安装Zookeeper

    Kafka的运行依赖于Zookeeper,所以在运行Kafka之前我们需要安装并运行Zookeeper

    1. 下载安装文件: http://mirror.bit.edu.cn/apache/zookeeper/
    2. 解压文件(本文解压到 E:zookeeper-3.4.8)
    3. 打开E:zookeeper-3.4.8conf,把zoo_sample.cfg重命名成zoo.cfg
    4. 从文本编辑器里打开zoo.cfg
    5. 修改dataDir和dataLogDir保存路径
      dataDir=E:datalogszookeeper
      dataLogDir=E:datalogszookeeper
    6. 添加如下系统变量:ZOOKEEPER_HOME: E:zookeeper-3.4.8
      Path: 在现有的值后面添加 ;%ZOOKEEPER_HOME%in;
    7. 运行Zookeeper: 打开cmd然后执行zkserver 命令。如果打印以下信息则表示zookeeper已经安装成功并运行在2181端口。

    安装并运行Kafka

    1. 下载安装文件: http://kafka.apache.org/downloads.html
    2. 解压文件(本文解压到 E:kafka_2.11-2.0.0)
    3. 打开E:kafka_2.11-2.0.0config server.properties
    4. 把 log.dirs的值改成 log.dirs=E:datalogskafka
    5. E:kafka_2.11-2.0.0in文件夹下的.sh命令脚本是在shell下运行的,此文件夹下还有个 windows文件夹,里面是windows下运行的.bat命令脚本
    6. 在E:kafka_2.11-2.0.0文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口
    7. 输入并执行一下命令以打开kafka:
      .inwindowskafka-server-start.bat .configserver.properties

    创建topics

    1. 在E:kafka_2.11-2.0.0inwindows文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口

      以下创建一个名为test的topic:

      kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test
    2. 查看topics,这里只是查看一下是否创建成功,也可以不用查看topic,直接跳过不做此操作:
      kafka-topics.bat --describe --zookeeper localhost:2181 --topic test

    Producer

    在E:kafka_2.11-2.0.0inwindows文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口

    kafka-console-producer.bat --broker-list localhost:9092 --topic test

    Consumer

    在E:kafka_2.11-2.0.0inwindows文件夹中”Shift+鼠标右键”点击空白处打开命令提示窗口

    kafka-console-consumer.bat --zookeeper localhost:2181 --topic test

    如果下载的kafka是较新的版本,Consumer使用如下的命令:

    kafka-console-consumer.bat --bootstrap-server localhost:9092 --topic test
  • 相关阅读:
    一个SQL语句实现的统计功能
    VS2005中的全角BUG(C#代码)[转]
    Observer Pattern(观察者模式)及其在C#中的实现
    我觉得VS2003中最差的地方
    上班了,有点困:(
    GPRS
    今天是郁闷的一天
    今天上午给公司老总演示了SharePoint项目的产品雏形
    介绍一下SharePoint
    SharePoint Service里面的东东真让人头疼
  • 原文地址:https://www.cnblogs.com/wyt007/p/14070144.html
Copyright © 2011-2022 走看看