zoukankan      html  css  js  c++  java
  • 一张表的数据大概是3000万行sqlserver数据导入到MongoDb

    迁移sqlserver数据到MongoDb

     

     前言  

      随着数据量的日积月累,数据库总有一天会不堪重负的,除了通过添加索引、分库分表,其实还可以考虑一下换个数据库。我强烈推荐使用MongoDb,我举例说一下我的经历:我的项目中有一张表的数据大概是3000万行数据,sqlserver查找的速度是16秒左右。我导入到MongoDb中后查询的速度大概能快一倍多,7秒左右,如果还是不能满足需求,MongoDb同样可以:索引,分库分表。那么下面就开干吧:

      迁移方案:sqlserver和mongodb都支持导入导出csv格式,这肯定是比手动编码写个查询然后插入到mongodb来的方便直接,而且更高效。

     步骤

    一.在sqlserver中导出csv文件

      没有在一下步骤中体现的都可以直接点击“Next”

    1.选择数据库》任务》导出数据》连接数据库
    2.导出文件设置
    3.选择需要导出的表

    二安装mongoimport工具(已安装了可以跳过)

    2.解压到MongoDb安装路径
    3.配置环境变量

    二.导入到MongoDb

    mongoimport -d test -c dcsData --type csv --headerline --file C://MongoData/dcsData.csv
     
    -d: 数据库
    -c: 集合名(表名)
    --type: 文件类型
    --headerline:使用第一行作为表头,全部导入(可以指定某一列或多列)
    --file: 要导入的文件
     
    四.如果看到如下输出表示成功了
     
    作者:听枫xl
    本文版权归作者和博客园共有,欢迎转载,但必须给出原文链接,并保留此段声明,否则保留追究法律责任的权利。
  • 相关阅读:
    avaya电话重置
    Zscaler Client Connector
    tcpdump port 514
    rsyslog和过滤规则
    syslog,rsyslog和syslog-ng
    Ubuntu 搭建Rsyslog服务器
    syslog日志的类型和级别
    springboot_springSecurity整合
    springboot_整合JDBC_Druid数据源_MyBatis
    springboot_数据增删改查
  • 原文地址:https://www.cnblogs.com/Leo_wl/p/14244950.html
Copyright © 2011-2022 走看看