zoukankan      html  css  js  c++  java
  • kafka学习之相关命令

    1 分别启动zoo和kafka

    ./zkServer.sh start 然后需要使用./zkServer.sh status查看状态,会发现一个奇怪得问题,即使start启动的时候表示启动成功,但是status得时候发现是失败,这个是多种原因造成的。

    (1) 查看各台机器得相关配置

    (2) 网路设置

    然后启动kafka

    创建Topic

    ./bin/kafka-topics.sh --create --zookeeper 本机IP:2181 --replication-factor 1 --partitions 1 --topic randtoc

    查看Topic

    ./bin/kafka-topics.sh --list --zookeeper localhost:2181

    (3)简单测试

    开启消费者

    ./bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test1 --from-beginning

    开启生产者

    ./bin/kafka-console-producer.sh --broker-list localhost:9092 --topic randtoc   注意要是已经存在得topic哟

    命令行输入一些消息会发现消费者那边就立即消费了。

    2 彻底删除kafka

    (1)删除kafka存储目录(server.properties文件log.dirs配置,默认为"/tmp/kafka-logs")相关topic目录

    (2)Kafka 删除topic的命令是:

         ./bin/kafka-topics  --delete --zookeeper 【zookeeper server】  --topic 【topic name】

         如果kafaka启动时加载的配置文件中server.properties没有配置delete.topic.enable=true,那么此时的删除并不是真正的删除,而是把topic标记为:marked for deletion

         你可以通过命令:./bin/kafka-topics --zookeeper 【zookeeper server】 --list 来查看所有topic

         此时你若想真正删除它,可以如下操作:

         (1)登录zookeeper客户端:命令:./bin/zookeeper-client

         (2)找到topic所在的目录:ls /brokers/topics

         (3)找到要删除的topic,执行命令:rmr /brokers/topics/【topic name】即可,此时topic被彻底删除。

        另外被标记为marked for deletion的topic你可以在zookeeper客户端中通过命令获得:ls /admin/delete_topics/【topic name】,

        如果你删除了此处的topic,那么marked for deletion 标记消失

        zookeeper 的config中也有有关topic的信息: ls /config/topics/【topic name】暂时不知道有什么用

    总结:

    彻底删除topic:

     1、删除kafka存储目录(server.properties文件log.dirs配置,默认为"/tmp/kafka-logs")相关topic目录

     2、如果配置了delete.topic.enable=true直接通过命令删除,如果命令删除不掉,直接通过zookeeper-client 删除掉broker下的topic即可。

  • 相关阅读:
    在Salesforce中对某一个Object添加 Validation Rule
    在Salesforce中创建Schedule的Job去定时触发对应的Class
    在Salesforce中向Page Layout中添加Visualforce Page
    【LeetCode】229. Majority Element II
    【LeetCode】230. Kth Smallest Element in a BST (2 solutions)
    【LeetCode】231. Power of Two
    【LeetCode】232. Implement Queue using Stacks
    【LeetCode】219. Contains Duplicate II
    【LeetCode】217. Contains Duplicate (2 solutions)
    【LeetCode】216. Combination Sum III
  • 原文地址:https://www.cnblogs.com/lanjianhappy/p/10647015.html
Copyright © 2011-2022 走看看