zoukankan      html  css  js  c++  java
  • 从mongo数据库中导出数据的方法

    一、Mongodb导出工具mongoexport

    Mongodb中的mongoexport工具可以把一个collection导出成JSON格式或CSV格式(类似于表格的形式)的文件。可以通过参数指定导出的数据项,也可以根据指定的条件导出数据。
    mongoexport具体用法

    1. C:mongoin>mongoexport -help  
    2. options:  
    3.   --help                  produce help message  
    4.   -v [ --verbose ]        be more verbose (include multiple times for more  
    5.                           verbosity e.g. -vvvvv)  
    6.   -h [ --host ] arg       mongo host to connect to ( <set name>/s1,s2 for sets)  
    7.   --port arg              server port. Can also use --host hostname:port  
    8.   --ipv6                  enable IPv6 support (disabled by default)  
    9.   -u [ --username ] arg   username  
    10.   -p [ --password ] arg   password  
    11.   --dbpath arg            directly access mongod database files in the given  
    12.                           path, instead of connecting to a mongod  server -  
    13.                           needs to lock the data directory, so cannot be used  
    14.                           if a mongod is currently accessing the same path  
    15.   --directoryperdb        if dbpath specified, each db is in a separate  
    16.                           directory  
    17.   -d [ --db ] arg         database to use  
    18.   -c [ --collection ] arg collection to use (some commands)  
    19.   -f [ --fields ] arg     comma separated list of field names e.g. -f name,age  
    20.   --fieldFile arg         file with fields names - 1 per line  
    21.   -q [ --query ] arg      query filter, as a JSON string  
    22.   --csv                   export to csv instead of json  
    23.   -o [ --out ] arg        output file; if not specified, stdout is used  
    24.   --jsonArray             output to a json array rather than one object per  
    25.                           Line 

    参数说明
    -h:指明数据库宿主机的IP
    -u:指明数据库的用户名
    -p:指明数据库的密码
    -d:指明数据库的名字
    -c:指明collection的名字
    -f:指明要导出那些列
    -o:指明到要导出的文件名
    -q:指明导出数据的过滤条件

    二、常用数据导出实例

    1.直接导出数据到文件中

    复制代码代码如下:

    [root@localhost bin]# ./mongoexport -d my_mongodb -c user -o user.dat
    connected to: 127.0.0.1
    exported 2 records
    [root@localhost bin]# cat user.dat
    { "_id" : { "$oid" : "4f81a4a1779282ca68fd8a5a" }, "uid" : 2, "username" : "Jerry", "age" : 100 }
    { "_id" : { "$oid" : "4f844d1847d25a9ce5f120c4" }, "uid" : 1, "username" : "Tom", "age" : 25 }
    [root@localhost bin]#

    命令执行完后使用命令查看,会发现目录下生成了一个students.dat的文件

    参数说明

    -d 指明使用的库, 本例中为” my_mongodb”
    -c 指明要导出的表, 本例中为”user”
    -o 指明要导出的文件名, 本例中为”user.dat”
    从上面可以看到导出的方式使用的是JSON 的样式 

    2、将foo库中的表t1导出成json格式

    复制代码代码如下:

    [root@localhost bin]# ./mongoexport -d foo -c t1 -o /data/t1.json   
    connected to: 127.0.0.1   
    exported 1 records   
    [root@localhost bin]# 

    导出成功后我们看一下/data/t1.json文件的样式

    复制代码代码如下:

    root@localhost data]# more t1.json   
    { "_id" : { "$oid" : "4f927e2385b7a6814a0540a0" }, "age" : 2 }   
    [root@localhost data]# 

    3、导出为CSV格式的数据

    复制代码代码如下:

    [root@localhost bin]# ./mongoexport -d foo -c t2 --csv -f age,name -o /data/t2.csv   
    connected to: 127.0.0.1   
    exported 1 records   
    [root@localhost bin]# 

    查看/data/t2.csv的导出结果

    复制代码代码如下:
     mongoexport -h 10.100.30.130 --port 27017 -d zhongtudao -c hand_result --type=csv -f datetime,url,show_count,click_count -q '{datetime:"20170402"}' -o ./20170402.csv
    4、指定过滤条件导出数据:
    -q 参数的使用方法是:-q '{key:"value"}'
     
    代码如下:
     mongoexport -h 10.100.30.130 --port 27017 -d zhongtudao -c hand_result --type=csv -f datetime,url,show_count,click_count -q '{datetime:"20170402"}' -o ./20170402.csv
     
    三、Mongodb导入工具mongoexport

    Mongodb中的mongoimport工具可以把一个特定格式文件中的内容导入到指定的collection中。该工具可以导入JSON格式数据,也可以导入CSV格式数据。
     
    具体使用如下:

     

    参数说明
     
    -h:指明数据库宿主机的IP
    -u:指明数据库的用户名
    -p:指明数据库的密码
    -d:指明数据库的名字
    -c:指明collection的名字
    -f:指明要导入那些列

    四、常用数据导入实例

    1、导入JSON 数据

    复制代码代码如下:

    [root@localhost mongodb]# ./bin/mongoimport -d test -c students students.dat   
    connected to: 127.0.0.1  
    imported 9 objects  
    [root@localhost mongodb]#   

    参数说明
    -d:指明数据库名,本例中为test
    -c:指明collection名,本例中为students
    students.dat:导入的文件名

    2、导入CSV格式文件中的内容

    复制代码代码如下:

    [root@localhost mongodb]# ./bin/mongoimport -d test -c students --type csv --headerline --file students_csv.dat  
    connected to: 127.0.0.1 
    imported 10 objects 
    [root@localhost mongodb]#  
    参数说明:
    -type:指明要导入的文件格式
    -headerline:指明第一行是列名,不需要导入
    -file:指明要导入的文件
  • 相关阅读:
    Redis常用数据类型及应用场景之Set
    Redis常用数据类型及应用场景之List
    Redis常用数据类型及应用场景之Hash
    exists & not exists
    oracle 中 dblink 的简单使用
    DockerCompose之数据卷Volume
    DockerCompose之常见编排脚本
    160308-学习State Pattern Actor
    12.3-框架维护
    12.2-机器人协作系统
  • 原文地址:https://www.cnblogs.com/weiwei-python/p/14108898.html
Copyright © 2011-2022 走看看