nodejs基础(管道、流)实现:复制、压缩、加密、解压,解密,写入文件
stream流 都是events.EventEmitter的一个实例,都可以来创建自定义事件(也就是说,流是一个事件的实例)
在nodejs中 对http的请求与响应都是用流来实现的,请求就是一个输入的流,响应就是一个输出的流
使用stream流,可以提高性能,前面说的读写文件,是一次性把文件放在内存中,这样就不大合适了,而stream流,是将读取的文件放在Buffer(缓存)中。就是一边放,一边处理,steam流有两个好处,就是处理数据和提高性能。
下面来实现一个流:
var fs = require('fs');
var myReadStream = fs.createReadStream(__dirname+"/readMe.txt","utf8");//创建一个读取流的实例
var data="";//创建一个变量来接收文件
myReadStream.on("data",function(chunk){//data是在接收数据的时候用的监听函数 当文件很大时,是把文件分成很多Buffer来接收的 所以这个函数可能执行多次
data+=chunk;
})
myReadStream.on("end",function(){//end是接收完毕后的监听函数
console.log(data);
})
上诉代码,如果不设置编码为utf8,data值将会为Buffer,看着是一串数字
当然,还可以另一种设置编码的方式:
var myReadStream = fs.createReadStream(__dirname+"/readMe.txt");//创建一个读取流的实例
myReadStream.setEncoding("utf8");//设置编码
var data="";//创建一个变量来接收文件
myReadStream.on("data",function(chunk){//data是在接收数据的时候用的监听函数 当文件很大时,是把文件分成很多Buffer来接收的 所以这个函数可能执行多次
data+=chunk;
})
myReadStream.on("end",function(){//end是接收完毕后的监听函数
console.log(data);
})
在原来的基础上写一个写入流:
var myReadStream = fs.createReadStream(__dirname+"/readMe.txt");//创建一个读取流的实例
var myWriteStream = fs.createWriteStream(__dirname+"/writeMe.txt");//创建一个写入流 myReadStream.setEncoding("utf8");//设置编码 myReadStream.on("data",function(chunk){//data是在接收数据的时候用的监听函数 当文件很大时,是把文件分成很多Buffer来接收的 所以这个函数可能执行多次
myWriteStream.write(chunk);//将读取到的片段写入,参数就是要写入的内容
}) myReadStream.on("end",function(){//end是接收完毕后的监听函数 })
写入流 还有一种用法
var myWriteStream = fs.createWriteStream(__dirname+"/writeMe.txt");//创建一个写入流 var writeData = "hello world";
myWriteStream.write(writeData);//写入
myWriteStream.end();//写入完之后调用end方法 (调用这个方法是 代表这个流结束了,如果不掉用这个流,这个流是结束不了的,finish方法不会触发)
myWriteStream.on("finish",function(){//加一个监听函数,监听撸结束后
console.log("finished");
})
管道的使用pipe
用管道来实现赋值文件会非常简单:
var fs = require('fs');
var myReadStream = fs.createReadStream(__dirname+"/readMe.txt");//创建一个读取流的实例
var myWriteStream = fs.createWriteStream(__dirname+"/writeMe.txt");//创建一个写入流
myReadStream.pipe(myWriteStream);//使用管道 将读取流和写入流连接到一起
下面来上一个真实的代码,读取文件,加密,压缩,然后写入
var crypto = require("crypto");//用来加密
var fs = require("fs");
var zlib = require("zlib");//用来压缩
var password = new Buffer(process.env.PASS || "password");
var encryptStream = crypto.createCipher('aes-256-cbc',password);
var gzip = zlib.createGzip();
var readStream = fs.createReadStream(__dirname+"/readMe.txt");
var writeStream = fs.createWriteStream(__dirname+"/out.gz");
readStream//读取
.pipe(encryptStream)//加密
.pipe(gzip)//压缩
.pipe(writeStream)//写入
.on("finish",function(){//写入结束的回调
console.log("done");
})
下面将上面代码压缩出来的out.gz文件解压,解密,然后输出到终端
var crypto = require("crypto");//用来加密
var fs = require("fs");
var zlib = require("zlib");//用来压缩
var password = new Buffer(process.env.PASS || "password");
var decryptStream = crypto.createDecipher('aes-256-cbc',password);
var gzip = zlib.createGunzip();//解压
var readStream = fs.createReadStream(__dirname+"/out.gz");
readStream//读取
.pipe(gzip)//解压
.pipe(decryptStream)//解密
.pipe(process.stdout)//输出到终端中 标准输出
.on("finish",function(){//解压后的回调
console.log("done");
})
上面的代码稍微更改一下,将解密,解压出来的文件写入到deOut.txt文件中
var crypto = require("crypto");//用来加密
var fs = require("fs");
var zlib = require("zlib");//用来压缩
var password = new Buffer(process.env.PASS || "password");
var decryptStream = crypto.createDecipher('aes-256-cbc',password);
var gzip = zlib.createGunzip();//解压
var readStream = fs.createReadStream(__dirname+"/out.gz");
var writeStream = fs.createWriteStream(__dirname+"/deOut.txt");
readStream//读取
.pipe(gzip)//解压
.pipe(decryptStream)//解密
.pipe(writeStream)//将解密,解压的文件写入到deOut.txt文件中
.on("finish",function(){//解压后的回调
console.log("done");
})
小知识:
process.stdout.write("哈哈");
可以在终端打印出指定内容
nodejs基础(管道、流)实现:复制、压缩、加密、解压,解密,写入文件的更多相关文章
- python用模块zlib压缩与解压字符串和文件的方法
摘自:http://www.jb51.net/article/100218.htm Python标准模块中,有多个模块用于数据的压缩与解压缩,如zipfile,gzip, bz2等等. python中 ...
- Ubuntu下压缩与解压各种文件的命令
1.压缩与解压xz文件 (1)压缩 xz -z filename (2)解压 xz -d filename.xz 2.压缩与解压tar文件 (1)压缩 tar -cvf filename(压缩到 ...
- Java基础-IO流对象之压缩流(ZipOutputStream)与解压缩流(ZipInputStream)
Java基础-IO流对象之压缩流(ZipOutputStream)与解压缩流(ZipInputStream) 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 之前我已经分享过很多的J ...
- 用DELPHI 开发压缩、解压、自解压、加密
引 言:在日常中,我们一定使用过WINZIP.WINRAR这样的出名的压缩软件,就是我们开发软件过程中不免要遇到数据加密.数据压缩的问题!本文中就这一技术问题展开探讨,同时感谢各位网友的技巧,在我每次 ...
- 使用.Net自带的GZipStream进行流压缩与解压
using System.IO; using System.IO.Compression; using System.Text; namespace CS.Utility { /// <summ ...
- 记录新项目中遇到的技术及自己忘记的技术点【DES加密解密,MD5加密,字符串压缩、解压,字符串截取等操作】
一.DES加密.解密 #region DES加密解密 /// <summary> /// 进行DES加密 /// </summary> /// <param name=& ...
- python的shutil模块-文件的移动、复制、打包、压缩、解压等
参考https://www.cnblogs.com/xiangsikai/p/7787101.html os模块提供了对目录或者文件的新建.删除.查看文件属性,还提供了对文件以及目录的路径操作,比如说 ...
- 文件操作工具类: 文件/目录的创建、删除、移动、复制、zip压缩与解压.
FileOperationUtils.java package com.xnl.utils; import java.io.BufferedInputStream; import java.io.Bu ...
- Java的压缩、解压及压缩加密、解密解压 样例
为了节约带宽.加快传送速度,http协议支持gzip的压缩,但假设我们的app与后台不是通过http协议通讯的.那么压缩.解压这个流程须要自己写.以下给出compress和decompress的代码: ...
- I/O操作之文件压缩与解压
与文件压缩与解压相关的类在java.util.zip包下 实例 //文件压缩 import java.io.File; import java.io.FileInputStream; import j ...
随机推荐
- jacascript CSS样式的脚本化(js)操作
前言:这是笔者学习之后自己的理解与整理.如果有错误或者疑问的地方,请大家指正,我会持续更新! 引入CSS有3种方式:行间样式,内联样式和外部链接样式. 在实际工作中,我们使用 javascript 操 ...
- C#操作DOS命令,并获取处理返回值
// /*---------------- // // 文件名:Method // // 文件功能描述: // // 使用 ADB 来进行安卓设备与PC端之间的文件交互,具体adb命令操作请百度 ...
- Dapper 入门
中文文档连接:https://www.w3cschool.cn/dapperorm/dapperorm-toj931f2.html 官网文档连接:https://dapper-tutorial.net ...
- java入门学习总结_03
1.键盘录入 2.分支结构 键盘录入 概述 1.键盘录入:在程序运行的过程中,可以让用户录入一些数据,存储在内存的变量中,在后续的程序运行过程中,可以使用这些数据. 2.步骤: 第一步:导包,在类声明 ...
- c# 执行调用Oracle Procedure传参及回传值
////定義參數 //IDataParameter[] parameters = // { ...
- Android休眠唤醒机制
有四种方式可以引起休眠 ①在wake_unlock()中, 如果发现解锁以后没有任何其他的wake lock了, 就开始休眠 ②在定时器到时间以后, 定时器的回调函数会查看是否有其他的wake loc ...
- 常用git指令记录
Generating an SSH key Checking for existing SSH keys Generating a new SSH key and adding it to the s ...
- C语言字符串格式化输出
%ms:将字符串全部输出,如果字符串长度小于m,在左边用空格将输出宽度补齐为m: %.ns:如果n大于字符串长度,将字符串全部输出,否则,输出前n个字符: %m.ns:如果n不大于m,输出指定字符串的 ...
- [GDOI2014]采集资源
题目概述 题目描述 魔兽争霸3中,战略资源的采集通过使用农民.苦工.小精灵以及寺僧来进行. 在魔兽争霸4的开发中,玻璃渣觉得这种模式太过单一,于是他们想添加更多的单位来使采集的模式更加丰富. 在新的模 ...
- ndk学习之C语言基础复习----指针、函数、预处理器
指针: 指针乃C.C++的灵魂之所在,所以有必要好好的复习复习.什么是指针?一句话来概括:“指针是一个变量,它的值是一个地址.”,其中指针变量的声明有如下三种形式: 其中第一种是被推荐的写法. 其中还 ...