- 命令启动大全:
- 启动Hadoop:./start-all.sh
- 启动Zookeeper: ./zkServer.sh start 查看Zookeeper状态: ./zkServer.sh status
- 启动Redis:redis-server &
- 启动Kafka:
- bin/kafka-server-start.sh config/server.properties
- 查看当前服务器中的所有topic
- bin/kafka-topics.sh --list --zookeeper zk01:2181
- 创建topic
- ./kafka-topics.sh --create --zookeeper mini1:2181 --replication-factor 1 --partitions 3 --topic first
- 删除topic
- sh bin/kafka-topics.sh --delete --zookeeper zk01:2181 --topic test
- 需要server.properties中设置delete.topic.enable=true否则只是标记删除或者直接重启。
- 通过shell命令发送消息
- kafka-console-producer.sh --broker-list kafka01:9092 --topic itheima
- 通过shell消费消息
- sh bin/kafka-console-consumer.sh --zookeeper zk01:2181 --from-beginning --topic test1
- 查看消费位置
- sh kafka-run-class.sh kafka.tools.ConsumerOffsetChecker --zookeeper zk01:2181 --group testGroup
- 查看某个Topic的详情
- sh kafka-topics.sh --topic test --describe --zookeeper zk01:2181
- 启动Spark:
- sbin/start-all.sh