zoukankan      html  css  js  c++  java
  • Storm集群扩容——从单机模式拓展到集群模式,以此类推

      Storm是分布式的实时流处理系统,单机模式肯本不能体现其强大特点,尤其是当需要处理的数据很大很快的

    时候,Storm可以随时扩容,而且操作非常简单,编写的应用程序自动负载均衡。

      前面已经介绍了如何安装Storm——单机模式,如果已经成功安装好了单机模式的Storm,那么扩容就非常简

    单了。

      1. 将Storm主节点安装目录拷贝到新扩容的机器上:

        scp -rp /home/xxx/apache-storm-0.9.6 root@10.0.6.80:/home/xxx/

      2. 查看Storm配置文件storm.yaml里的storm.local.dir: "/xxx/xxx"配置项,按照配置的路径配置相应的文件

        夹。

        我这里配置的路径不在Storm目录下,需要重新建,给读写权限。如果是在Storm下,拷贝文件后需要删除

        里面的原始数据,不然在Storm UI里看不到。

      3. 启动Storm从节点:

        /bin/storm supervisor

      最后在浏览器里输入Storm UI地址查看是否有新接入的节点。

  • 相关阅读:
    es的多种term查询
    es的批量导入
    可重入锁
    常见的字段类型
    es中的分词
    搜索的简单使用
    application.properties中的list配置
    mysql中的concat的几个函数使用
    文档的增删改查
    Mxnet学习笔记(3)--自定义Op
  • 原文地址:https://www.cnblogs.com/vincent-vg/p/5806532.html
Copyright © 2011-2022 走看看