NodeJs之EXCEL文件导入导出MongoDB数据库数据

NodeJs之EXCEL文件导入导出MongoDB数据库数据

一,介绍与需求

1.1,介绍

 (1),node-xlsx : 基于Node.js解析excel文件数据及生成excel文件。

 (2),excel-export : 基于Node.js将数据生成导出excel文件，生成文件格式为xlsx(可以指定)，可以设置单元格宽度，API容易上手，无法生成worksheet字表，比较单一，基本功能可以基本满足；

1.2,需求

 快速插入数据导数据库,备份数据等

二,导入导出

2.1,数据导入

第一步:安装node-xlsx

cnpm install node-xlsx --save

第二步:引入node-xlsx

//引入node-xlsx解析excel模块
var node_xlsx = require('node-xlsx');

第三步:解析导入的excel

 let obj = node_xlsx.parse(excelConfig.excel_Dir);// 支持的excel文件类有.xlsx .xls .xlsm .xltx .xltm .xlsb .xlam等
    let excelObj = obj[0].data;//取得第一个excel表的数据
    let insertData = [];//存放数据
 
    //循环遍历表每一行的数据
    for(var i=1;i<excelObj.length;i++){
        var rdata = excelObj[i];
        var CityObj =new Object();
        // ["id" : "101010100","provinceZh" : "北京","leaderZh" : "北京","cityZh" : "北京","cityEn" : "beijing"]
        for(var j=0;j<rdata.length;j++){
            CityObj[excelConfig.CityArray[j]]=rdata[j]
        }
        insertData.push(CityObj)
    }

第四步:删除已解析的excel文件

var fs = require('fs');
...
 
//导入解析成功后 将文件删除
    fs.unlink(excelConfig.excel_Dir,function (err) {
        if(err) throw err;
        console.log("删除文件"+excelConfig.excel_Dir+"成功")
    })

...

第五步:存入MongoDB数据库

var MongoDbAction = require('../services/db_mongodb.js');

...

 //将每一行的数据存进MongoDB数据库中
    MongoDbAction.insertMany(excelConfig.TableName, insertData, function (err, result) {
        if (!err) {
            res.status(200).json({
                httpCode: 200,
                message: '导入成功',
                data:{
                    insertTotal:result&&result.n?result.n:result.length
                },
                returnValue: 1
            });
        } else {
            res.status(200).json({
                httpCode: 200,
                message: '导入失败',
                data: err,
                returnValue: 0
            });
        }
    });

...

第六步:抛出接口

var path = require("path");
var fs = require('fs');
var express = require("express");

...

//先包含进来
var nodeImportExcel = require('../services/node_import_excel.js');


var router = express.Router();

...

router.post('/tolead/excel', upload.single('file'), function (req, res, next) {
    var fileName = req.file.filename;
    let splitFileName = fileName.split('.');
    let ExcelType = splitFileName[splitFileName.length-1];// 支持的excel文件类有.xlsx .xls .xlsm .xltx .xltm .xlsb .xlam等
    if(ExcelType!='xlsx'&&ExcelType!='xls'&&ExcelType!='xlsm'&&ExcelType!='xltx'&&ExcelType!='xltm'&&ExcelType!='xlsb'&&ExcelType!='xlam'){
        res.status(200).json({
            httpCode: 200,
            message: '文件类型错误,请上传Excel文件!',
            data: {},
            returnValue: 0
        });
        return;
    }

...

    //定义实体类数组
    let TableName = 'Test'
    let CityArray = new Array('id', 'provinceZh', 'leaderZh', 'cityZh', 'cityEn');
    let importConfig = {
        excel_Dir,
        CityArray,
        TableName
    }

....

   nodeImportExcel.parseExcel(importConfig,res)
              
      .... 

});

module.exports = router;

第七步:调用效果

(1),成功

 (2),失败 类型不对

2.2,数据导出

 第一步:安装excel-export

cnpm install excel-export --save

 第二步:引入excel-export

var nodeExcel = require("excel-export");//首先，引入excel模块：

 第三步:实现导出接口抛出

var nodeExcel = require("excel-export");//首先，引入excel模块：
var express = require('express');
var router = express.Router();
var moment = require('moment');//时间格式化
// import moment from 'moment';
//先包含进来
var MongoDbAction = require('../services/db_mongodb.js');

router.get('/download/excel', function (req, res) {
    var conf = {};//创建一个写入格式map，其中cols(表头)，rows(每一行的数据);
    var cols = ['城市编码', '所属省份', '所属市', '城市名称', '城市英文名称'];//手动创建表头中的内容
    conf.cols = [];//在conf中添加cols

    for (var i = 0; i < cols.length; i++) {
        var tits = {};//创建表头数据所对应的类型,其中包括 caption内容 type类型
        tits.caption = cols[i];//添加内容
        tits.type = 'string';//添加对应类型，这类型对应数据库中的类型，入number，data但一般导出的都是转换为string类型的
        conf.cols.push(tits);//将每一个表头加入cols中
    }
    let fields = {
        id: '',
        provinceZh: '',
        leaderZh: '',
        cityZh: '',
        cityEn: ''
    }
    MongoDbAction.getFieldsByConditions('AllCity', {}, fields, function (err, data) {//根据需求查询想要的字段
        if (err) {
            //执行出错
        } else {
            var tows = ['id', 'provinceZh', 'leaderZh', 'cityZh', 'cityEn'];//创建一个和表头对应且名称与数据库字段对应数据，便于循环取出数据
            var datas = [];//用于承载数据库中的数据
            let towsLen = tows.length
            let dataLen = data.length
            for (var i = 0; i < dataLen; i++) {//循环数据库得到的数据，因为取出的数据格式为
                //[{"id" : "101010100","provinceZh" : "北京","leaderZh" : "北京","cityZh" : "北京","cityEn" : "beijing"},{…………},{…………}]
                let row = [];//用来装载每次得到的数据
                for (let j = 0; j < towsLen; j++) {//内循环取出每个
                    row.push(data[i][tows[j]].toString());//row.push((data[i].tows[j]).toString());两种形式都是相同的
                }
                datas.push(row);//将每一个{ }中的数据添加到承载中
            }
            conf.rows = datas;//将所有行加入rows中
            var result = nodeExcel.execute(conf);//将所有数据写入nodeExcel中
            res.setHeader('Content-Type', 'application/vnd.openxmlformats');//设置响应头
            //设置下载文件命名 支持的excel文件类有.xlsx .xls .xlsm .xltx .xltm .xlsb .xlam等
            res.setHeader("Content-Disposition", "attachment; filename=city"+moment(new Date().getTime()).format('YYYYMMDDhhmmss')+".xlsx");
            res.end(result, 'binary');//将文件内容传入
        }
    });
});
module.exports = router;

第四步:前端调用

 downloadExcelOper() {
        var url =  "http://localhost:8000/api/v1/yingqi/download/excel";
        window.location = url;//这里不能使用get方法跳转，否则下载不成功
     
    }

第五步:导出后的效果