NodeJs之EXCEL文件导入导出MongoDB数据库数据

NodeJs之EXCEL文件导入导出MongoDB数据库数据

一,介绍与需求

1.1,介绍

(1),node-xlsx : 基于Node.js解析excel文件数据及生成excel文件。

(2),excel-export : 基于Node.js将数据生成导出excel文件，生成文件格式为xlsx(可以指定)，可以设置单元格宽度，API容易上手，无法生成worksheet字表，比较单一，基本功能可以基本满足；

1.2,需求

快速插入数据导数据库,备份数据等

二,导入导出

2.1,数据导入

第一步:安装node-xlsx

 cnpm install node-xlsx --save

第二步:引入node-xlsx

 //引入node-xlsx解析excel模块
 var node_xlsx = require('node-xlsx');

第三步:解析导入的excel

  let obj = node_xlsx.parse(excelConfig.excel_Dir);// 支持的excel文件类有.xlsx .xls .xlsm .xltx .xltm .xlsb .xlam等
     let excelObj = obj[0].data;//取得第一个excel表的数据
     let insertData = [];//存放数据

     //循环遍历表每一行的数据
     for(var i=1;i<excelObj.length;i++){
         var rdata = excelObj[i];
         var CityObj =new Object();
         // ["id" : "101010100","provinceZh" : "北京","leaderZh" : "北京","cityZh" : "北京","cityEn" : "beijing"]
         for(var j=0;j<rdata.length;j++){
             CityObj[excelConfig.CityArray[j]]=rdata[j]
         }
         insertData.push(CityObj)
     }

第四步:删除已解析的excel文件

 var fs = require('fs');
 ...

 //导入解析成功后 将文件删除
     fs.unlink(excelConfig.excel_Dir,function (err) {
         if(err) throw err;
         console.log("删除文件"+excelConfig.excel_Dir+"成功")
     })

 ...

第五步:存入MongoDB数据库

 var MongoDbAction = require('../services/db_mongodb.js');

 ...

  //将每一行的数据存进MongoDB数据库中
     MongoDbAction.insertMany(excelConfig.TableName, insertData, function (err, result) {
         if (!err) {
             res.status(200).json({
                 httpCode: 200,
                 message: '导入成功',
                 data:{
                     insertTotal:result&&result.n?result.n:result.length
                 },
                 returnValue: 1
             });
         } else {
             res.status(200).json({
                 httpCode: 200,
                 message: '导入失败',
                 data: err,
                 returnValue: 0
             });
         }
     });

 ...

第六步:抛出接口

 var path = require("path");
 var fs = require('fs');
 var express = require("express");

 ...

 //先包含进来
 var nodeImportExcel = require('../services/node_import_excel.js');

 var router = express.Router();

 ...

 router.post('/tolead/excel', upload.single('file'), function (req, res, next) {
     var fileName = req.file.filename;
     let splitFileName = fileName.split('.');
     let ExcelType = splitFileName[splitFileName.length-1];// 支持的excel文件类有.xlsx .xls .xlsm .xltx .xltm .xlsb .xlam等
     if(ExcelType!='xlsx'&&ExcelType!='xls'&&ExcelType!='xlsm'&&ExcelType!='xltx'&&ExcelType!='xltm'&&ExcelType!='xlsb'&&ExcelType!='xlam'){
         res.status(200).json({
             httpCode: 200,
             message: '文件类型错误,请上传Excel文件!',
             data: {},
             returnValue: 0
         });
         return;
     }

 ...

     //定义实体类数组
     let TableName = 'Test'
     let CityArray = new Array('id', 'provinceZh', 'leaderZh', 'cityZh', 'cityEn');
     let importConfig = {
         excel_Dir,
         CityArray,
         TableName
     }

 ....

    nodeImportExcel.parseExcel(importConfig,res)

       .... 

 });

 module.exports = router;

第七步:调用效果

(1),成功

(2),失败 类型不对

2.2,数据导出

第一步:安装excel-export

 cnpm install excel-export --save

第二步:引入excel-export

 var nodeExcel = require("excel-export");//首先，引入excel模块：

第三步:实现导出接口抛出

 var nodeExcel = require("excel-export");//首先，引入excel模块：
 var express = require('express');
 var router = express.Router();
 var moment = require('moment');//时间格式化
 // import moment from 'moment';
 //先包含进来
 var MongoDbAction = require('../services/db_mongodb.js');

 router.get('/download/excel', function (req, res) {
     var conf = {};//创建一个写入格式map，其中cols(表头)，rows(每一行的数据);
     var cols = ['城市编码', '所属省份', '所属市', '城市名称', '城市英文名称'];//手动创建表头中的内容
     conf.cols = [];//在conf中添加cols

     for (var i = 0; i < cols.length; i++) {
         var tits = {};//创建表头数据所对应的类型,其中包括 caption内容 type类型
         tits.caption = cols[i];//添加内容
         tits.type = 'string';//添加对应类型，这类型对应数据库中的类型，入number，data但一般导出的都是转换为string类型的
         conf.cols.push(tits);//将每一个表头加入cols中
     }
     let fields = {
         id: '',
         provinceZh: '',
         leaderZh: '',
         cityZh: '',
         cityEn: ''
     }
     MongoDbAction.getFieldsByConditions('AllCity', {}, fields, function (err, data) {//根据需求查询想要的字段
         if (err) {
             //执行出错
         } else {
             var tows = ['id', 'provinceZh', 'leaderZh', 'cityZh', 'cityEn'];//创建一个和表头对应且名称与数据库字段对应数据，便于循环取出数据
             var datas = [];//用于承载数据库中的数据
             let towsLen = tows.length
             let dataLen = data.length
             for (var i = 0; i < dataLen; i++) {//循环数据库得到的数据，因为取出的数据格式为
                 //[{"id" : "101010100","provinceZh" : "北京","leaderZh" : "北京","cityZh" : "北京","cityEn" : "beijing"},{…………},{…………}]
                 let row = [];//用来装载每次得到的数据
                 for (let j = 0; j < towsLen; j++) {//内循环取出每个
                     row.push(data[i][tows[j]].toString());//row.push((data[i].tows[j]).toString());两种形式都是相同的
                 }
                 datas.push(row);//将每一个{ }中的数据添加到承载中
             }
             conf.rows = datas;//将所有行加入rows中
             var result = nodeExcel.execute(conf);//将所有数据写入nodeExcel中
             res.setHeader('Content-Type', 'application/vnd.openxmlformats');//设置响应头
             //设置下载文件命名 支持的excel文件类有.xlsx .xls .xlsm .xltx .xltm .xlsb .xlam等
             res.setHeader("Content-Disposition", "attachment; filename=city"+moment(new Date().getTime()).format('YYYYMMDDhhmmss')+".xlsx");
             res.end(result, 'binary');//将文件内容传入
         }
     });
 });
 module.exports = router;

第四步:前端调用

  downloadExcelOper() {
         var url =  "http://localhost:8000/api/v1/yingqi/download/excel";
         window.location = url;//这里不能使用get方法跳转，否则下载不成功

     }

第五步:导出后的效果