zoukankan      html  css  js  c++  java
  • mongo 3.4分片集群系列之二:搭建分片集群--哈希分片

    这个系列大致想跟大家分享以下篇章:

    1、mongo 3.4分片集群系列之一:浅谈分片集群

    2、mongo 3.4分片集群系列之二:搭建分片集群--哈希分片

    3、mongo 3.4分片集群系列之三:搭建分片集群--哈希分片 + 安全

    4、mongo 3.4分片集群系列之四:搭建分片集群--哈希分片 + 安全 + 区域

    5、mongo 3.4分片集群系列之五:详解平衡器

    6、mongo 3.4分片集群系列之六:详解配置数据库

    7、mongo 3.4分片集群系列之七:配置数据库管理

    8、mongo 3.4分片集群系列之八:分片管理

    这一篇是实践篇。

    1、说说分片集群的架构

    这里要搭建的分片集群架构如下:

    2个mongos,1个三个成员的副本集配置服务器,2个单实例的分片。图示如下:

    简单介绍一下MongoDB分片集群由以下组件组成:

      • mongos:mongos作为查询路由器,提供客户端应用程序和分片集群之间的接口。
      • 配置服务器:配置服务器存储集群的元数据和配置信息。从MongoDB 3.4开始,配置服务器必须部署为副本集(CSRS)。
      • 分片:每个分片包含分片数据的一部分。每个分片可以部署为副本集。这里先做单实例,没有做副本集。

    2、分片前注意事项

    关于分片集群的一些注意点,请参阅:mongo 3.4分片集群系列之一:浅谈分片集群 ,其中第4点,分片前考虑事项。

    好啦。慎重考虑完分片前考虑事项的话,接下来就进入实践吧~~~

    3、搭建哈希分片集群

    下面是参照官网的  https://docs.mongodb.com/manual/tutorial/deploy-sharded-cluster-ranged-sharding/

    3.1、搭建前准备:

    物理环境:

    我这边是用两个虚拟机模仿两台服务器的(真实服务器也按照这个方法实践,可以行得通)。

    IP分别为192.168.209.155和192.168.209.156。其中,这两个IP之间必须互通。即192.168.209.155可以ping通192.168.209.156,192.168.209.156也可以ping通192.168.209.155。

    配置大致如下:(此操作是建立在mongo3.4版本)

    名称 主机 端口 副本集 Data路径 Log路径 配置文件路径
    router1 192.168.209.155 6666 /etc/mongo_router1.conf
    router2 192.168.209.156 6666 /etc/mongo_router2.conf
    config1 192.168.209.155 6000 mongo_config /mongo_config1/data /mongo_config1/log /mongo_config1/mongo_config1.conf
    config2 6001 /mongo_config2/data /mongo_config2/log /mongo_config2/mongo_config2.conf
    config3 6002 /mongo_config3/data /mongo_config3/log /mongo_config3/mongo_config3.conf
    shard1 192.168.209.155 6100 /mongo_shard1/data /mongo_shard1/log /mongo_shard1/mongo_shard1.conf
    shard2 192.168.209.156 6100 /mongo_shard2/data /mongo_shard2/log /mongo_shard2/mongo_shard2.conf

    接下来就来搭建哈希分片集群咯~~~

    3.2、创建配置服务器副本集

    部署具有三个成员的配置服务器副本集。

    (1)   mongo_config1 (在192.168.209.155上操作)

    1)         创建数据路径文件夹和日志路径文件夹

    # sudo mkdir –p /mongo_config1/data

    # sudo mkdir –p /mongo_config1/log

    2)         创建配置文件

    # sudo vim /mongo_config1/mongo_config1.conf

    文件中的配置如下:(所有空位都是空格,不是TAB键哦,大小写是严格区分的)

    storage:

     dbPath: “/mongo_config1/data”

     indexBuildRetry: false

    systemLog:

     destination: file

     path: “/mongo_config1/log/mongo_config1.log

    net:

     port: 6000

    sharding:

     clusterRole: configsvr

    replication:

     replSetName: mongo_config

    如下图:

         

        关于mongo3.4的配置文件YAML格式,也可以参阅我的另一篇文章mongo3.4 配置文件 注意事项

    3)         启动mongod实例

    # mongod --fork --config /mongo_config1/mongo_config1.conf

    --fork 是以线程方式启动mongod服务

    --config 指定配置文件路径

    (2)   mongo_config2(在192.168.209.155上操作)

    1)         创建数据路径文件夹和日志路径文件夹

    # sudo mkdir –p /mongo_config2/data

    # sudo mkdir –p /mongo_config2/log

    2)         创建配置文件

    # sudo vim /mongo_config2/mongo_config2.conf

    文件中的配置如下:(所有空位都是空格,不是TAB键哦,大小写是严格区分的)

    storage:

     dbPath: “/mongo_config2/data”

     indexBuildRetry: false

    systemLog:

     destination: file

     path: “/mongo_config2/log/mongo_config2.log

    net:

     port: 6001

    sharding:

     clusterRole: configsvr

    replication:

     replSetName: mongo_config

    如下图:

         

    3)         启动mongod实例

    # mongod --fork --config /mongo_config2/mongo_config2.conf

    --fork 是以线程方式启动mongod服务

    --config 指定配置文件路径

    (3)   mongo_config3 (在192.168.209.155上操作)

    1)         创建数据路径文件夹和日志路径文件夹

    # sudo mkdir –p /mongo_config3/data

    # sudo mkdir –p /mongo_config3/log

    2)         创建配置文件

    # sudo vim /mongo_config3/mongo_config3.conf

    文件中的配置如下:(所有空位都是空格,不是TAB键哦,大小写是严格区分的)

    storage:

     dbPath: “/mongo_config3/data”

     indexBuildRetry: false

    systemLog:

     destination: file

     path: “/mongo_config3/log/mongo_config3.log

    net:

     port: 6002

    sharding:

     clusterRole: configsvr

    replication:

     replSetName: mongo_config

    如下图:

         

    3)         启动mongod实例

    # mongod --fork --config /mongo_config3/mongo_config3.conf

    --fork 是以线程方式启动mongod服务

    --config 指定配置文件路径

    (4)   初始化副本集mongo_config(在192.168.209.155上操作)

    1)         连接任意一个mongod实例

    # sudo mongod --port 6000

    2)         初始化副本集

    输入以下命令:(这里只是为了方便理解,其实命令行打成一行即可)

    rs.initiate(

      {

        _id: "mongo_config",

        configsvr: true,

        members: [

          { _id : 0, host : "192.168.209.155:6000" },

          { _id : 1, host : "192.168.209.155:6001" },

          { _id : 2, host : "192.168.209.155:6002" }

        ]

      }

    )

    _id:必须匹配传递给mongod 的--replSet参数。

    members:是一个数组,每个副本集成员都需要一个文档。

    configsvr:必须设置true。

    3.3、创建分片

    (1)   mongo_shard1 (在192.168.209.155上操作)

    1)         为mongo_shard1创建配置文件

    # sudo vim /mongo_shard1/mongo_shard1.conf

    文件中的配置如下:(所有空位都是空格,不是TAB键哦,大小写是严格区分的)

    storage:

     dbPath: “/mongo_shard1/data”

     indexBuildRetry: false

    systemLog:

     destination: file

     path: “/mongo_shard1/log/mongo_shard1.log

    net:

     port: 6100

    sharding:

     clusterRole: shardsvr

    如下图:

         

    2)         启动mongod实例

    # mongod --fork --config /mongo_shard1/mongo_shard1.conf

    (2)   mongo_shard2(在192.168.209.156上操作)

    1)         为mongo_shard2创建配置文件

    # sudo vim /mongo_shard2/mongo_shard2.conf

    文件中的配置如下:(所有空位都是空格,不是TAB键哦,大小写是严格区分的)

    storage:

     dbPath: “/mongo_shard2/data”

     indexBuildRetry: false

    systemLog:

     destination: file

     path: “/mongo_shard2/log/mongo_shard2.log

    net:

     port: 6101

    sharding:

     clusterRole: shardsvr

    如下图:

    2)         启动mongod实例

    # mongod --fork --config /mongo_shard2/mongo_shard2.conf

    3.3、创建路由

    (1)   mongo_router1(在192.168.209.155上操作)

    1)         为mongo_router1创建配置文件

    # sudo vim /etc/mongo_router1.conf

    文件中的配置如下:(所有空位都是空格,不是TAB键哦,大小写是严格区分的)

    net:

     port: 6666

    sharding:

     configDB: mongo_config/192.168.209.155:6000,192.168.209.155:6001,192.168.209.155:6002

    如下图:

       

    2)         启动mongos实例

    # mongos --config /etc/mongo_router1.conf

    (2)   mongo_router2(在192.168.209.156上操作)

    1)         为mongo_router2创建配置文件

    # sudo vim /etc/mongo_router2.conf

    文件中的配置如下:(所有空位都是空格,不是TAB键哦,大小写是严格区分的)

    net:

     port: 6666

    sharding:

     configDB: mongo_config/192.168.209.155:6000,192.168.209.155:6001,192.168.209.155:6002

    如下图:

         

    2)         启动mongos实例

    # mongos --config /etc/mongo_router2.conf

    3.4、添加分片到集群

    (1)   连接任意一个mongos,这里连接mongo_router1(在192.168.209.155上操作)

    # mongo --port 6666

    (2)   添加分片

    1)         添加第一个分片mongo_shard1

    sh.addShard(“192.168.209.155:6100”);

    2)         添加第二个分片mongo_shard2

    sh.addShard(“192.168.209.156:6100”);

    3.5、为数据库启用分片(直接在3.4的窗口中运行即可)

    sh.enableSharding(“databaseName”);

    其中databaseName,为要分片的数据库。

    3.6、使用哈希分片分片集合(直接在3.5的窗口中运行即可)

    这里有两种情况,一种是空集合,另一种是有数据的集合,但对于这两种情况都建议用以下方法。

    (1)   对于确定作为分片键的字段,建立哈希索引

    use databaseName;

    db.collectionName.createIndex(Name:”hashed”);

    其中,databaseName是3.5启用的分片数据库名称;collectionName是要分片的集合;Name是作为分片键的字段。

    (2)   哈希分片

    sh.shardCollection(“databaseName.collectionName”,{Name:”hashed”})

    其中,databaseName是3.5启用的分片数据库名称;collectionName是要分片的集合;Name是作为分片键的字段。

     

    --------------------------------------- over ------------------------------------------------------

    以上资料,大部分是参考官网的资料,在此表示感谢。

       https://docs.mongodb.com/manual/tutorial/deploy-sharded-cluster-ranged-sharding/

  • 相关阅读:
    IOS Application生命周期
    IOS ViewController 生命周期
    nsinteger 与 int 区别
    判断日期是昨天,今天,明天,后天,其他的显示星期
    改变图片颜色(灰色显示)
    Linux系统管理
    PHP 相关软件下载
    检查域名是否正确解析网站
    定时任务
    BZOJ 3534 [Sdoi2014]重建
  • 原文地址:https://www.cnblogs.com/ddbear/p/7767121.html
Copyright © 2011-2022 走看看