stream流 都是events.EventEmitter的一个实例,都可以来创建自定义事件(也就是说,流是一个事件的实例)

在nodejs中 对http的请求与响应都是用流来实现的,请求就是一个输入的流,响应就是一个输出的流

使用stream流,可以提高性能,前面说的读写文件,是一次性把文件放在内存中,这样就不大合适了,而stream流,是将读取的文件放在Buffer(缓存)中。就是一边放,一边处理,steam流有两个好处,就是处理数据和提高性能。

下面来实现一个流:

var fs = require('fs');

var myReadStream = fs.createReadStream(__dirname+"/readMe.txt","utf8");//创建一个读取流的实例

var data="";//创建一个变量来接收文件

myReadStream.on("data",function(chunk){//data是在接收数据的时候用的监听函数  当文件很大时,是把文件分成很多Buffer来接收的 所以这个函数可能执行多次
data+=chunk;
}) myReadStream.on("end",function(){//end是接收完毕后的监听函数
console.log(data);
})

上诉代码,如果不设置编码为utf8,data值将会为Buffer,看着是一串数字

当然,还可以另一种设置编码的方式:

var myReadStream = fs.createReadStream(__dirname+"/readMe.txt");//创建一个读取流的实例

myReadStream.setEncoding("utf8");//设置编码

var data="";//创建一个变量来接收文件

myReadStream.on("data",function(chunk){//data是在接收数据的时候用的监听函数  当文件很大时,是把文件分成很多Buffer来接收的 所以这个函数可能执行多次
data+=chunk;
}) myReadStream.on("end",function(){//end是接收完毕后的监听函数
console.log(data);
})

在原来的基础上写一个写入流:

var myReadStream = fs.createReadStream(__dirname+"/readMe.txt");//创建一个读取流的实例
var myWriteStream = fs.createWriteStream(__dirname+"/writeMe.txt");//创建一个写入流 myReadStream.setEncoding("utf8");//设置编码 myReadStream.on("data",function(chunk){//data是在接收数据的时候用的监听函数 当文件很大时,是把文件分成很多Buffer来接收的 所以这个函数可能执行多次
myWriteStream.write(chunk);//将读取到的片段写入,参数就是要写入的内容
}) myReadStream.on("end",function(){//end是接收完毕后的监听函数 })

写入流 还有一种用法

var myWriteStream = fs.createWriteStream(__dirname+"/writeMe.txt");//创建一个写入流

var writeData = "hello world";
myWriteStream.write(writeData);//写入
myWriteStream.end();//写入完之后调用end方法 (调用这个方法是 代表这个流结束了,如果不掉用这个流,这个流是结束不了的,finish方法不会触发)
myWriteStream.on("finish",function(){//加一个监听函数,监听撸结束后
console.log("finished");
})

管道的使用pipe

用管道来实现赋值文件会非常简单:

var fs = require('fs');

var myReadStream = fs.createReadStream(__dirname+"/readMe.txt");//创建一个读取流的实例
var myWriteStream = fs.createWriteStream(__dirname+"/writeMe.txt");//创建一个写入流
myReadStream.pipe(myWriteStream);//使用管道 将读取流和写入流连接到一起

下面来上一个真实的代码,读取文件,加密,压缩,然后写入

var crypto = require("crypto");//用来加密
var fs = require("fs");
var zlib = require("zlib");//用来压缩 var password = new Buffer(process.env.PASS || "password");
var encryptStream = crypto.createCipher('aes-256-cbc',password); var gzip = zlib.createGzip();
var readStream = fs.createReadStream(__dirname+"/readMe.txt");
var writeStream = fs.createWriteStream(__dirname+"/out.gz"); readStream//读取
.pipe(encryptStream)//加密
.pipe(gzip)//压缩
.pipe(writeStream)//写入
.on("finish",function(){//写入结束的回调
console.log("done");
})

下面将上面代码压缩出来的out.gz文件解压,解密,然后输出到终端

var crypto = require("crypto");//用来加密
var fs = require("fs");
var zlib = require("zlib");//用来压缩 var password = new Buffer(process.env.PASS || "password");
var decryptStream = crypto.createDecipher('aes-256-cbc',password); var gzip = zlib.createGunzip();//解压
var readStream = fs.createReadStream(__dirname+"/out.gz"); readStream//读取
.pipe(gzip)//解压
.pipe(decryptStream)//解密
.pipe(process.stdout)//输出到终端中 标准输出
.on("finish",function(){//解压后的回调
console.log("done");
})

上面的代码稍微更改一下,将解密,解压出来的文件写入到deOut.txt文件中

var crypto = require("crypto");//用来加密
var fs = require("fs");
var zlib = require("zlib");//用来压缩 var password = new Buffer(process.env.PASS || "password");
var decryptStream = crypto.createDecipher('aes-256-cbc',password); var gzip = zlib.createGunzip();//解压
var readStream = fs.createReadStream(__dirname+"/out.gz");
var writeStream = fs.createWriteStream(__dirname+"/deOut.txt"); readStream//读取
.pipe(gzip)//解压
.pipe(decryptStream)//解密
.pipe(writeStream)//将解密,解压的文件写入到deOut.txt文件中
.on("finish",function(){//解压后的回调
console.log("done");
})

小知识:

process.stdout.write("哈哈");

可以在终端打印出指定内容

nodejs基础(管道、流)实现:复制、压缩、加密、解压,解密,写入文件的更多相关文章

  1. python用模块zlib压缩与解压字符串和文件的方法

    摘自:http://www.jb51.net/article/100218.htm Python标准模块中,有多个模块用于数据的压缩与解压缩,如zipfile,gzip, bz2等等. python中 ...

  2. Ubuntu下压缩与解压各种文件的命令

    1.压缩与解压xz文件 (1)压缩 xz -z  filename (2)解压 xz -d  filename.xz 2.压缩与解压tar文件 (1)压缩 tar -cvf  filename(压缩到 ...

  3. Java基础-IO流对象之压缩流(ZipOutputStream)与解压缩流(ZipInputStream)

    Java基础-IO流对象之压缩流(ZipOutputStream)与解压缩流(ZipInputStream) 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 之前我已经分享过很多的J ...

  4. 用DELPHI 开发压缩、解压、自解压、加密

    引 言:在日常中,我们一定使用过WINZIP.WINRAR这样的出名的压缩软件,就是我们开发软件过程中不免要遇到数据加密.数据压缩的问题!本文中就这一技术问题展开探讨,同时感谢各位网友的技巧,在我每次 ...

  5. 使用.Net自带的GZipStream进行流压缩与解压

    using System.IO; using System.IO.Compression; using System.Text; namespace CS.Utility { /// <summ ...

  6. 记录新项目中遇到的技术及自己忘记的技术点【DES加密解密,MD5加密,字符串压缩、解压,字符串截取等操作】

    一.DES加密.解密 #region DES加密解密 /// <summary> /// 进行DES加密 /// </summary> /// <param name=& ...

  7. python的shutil模块-文件的移动、复制、打包、压缩、解压等

    参考https://www.cnblogs.com/xiangsikai/p/7787101.html os模块提供了对目录或者文件的新建.删除.查看文件属性,还提供了对文件以及目录的路径操作,比如说 ...

  8. 文件操作工具类: 文件/目录的创建、删除、移动、复制、zip压缩与解压.

    FileOperationUtils.java package com.xnl.utils; import java.io.BufferedInputStream; import java.io.Bu ...

  9. Java的压缩、解压及压缩加密、解密解压 样例

    为了节约带宽.加快传送速度,http协议支持gzip的压缩,但假设我们的app与后台不是通过http协议通讯的.那么压缩.解压这个流程须要自己写.以下给出compress和decompress的代码: ...

  10. I/O操作之文件压缩与解压

    与文件压缩与解压相关的类在java.util.zip包下 实例 //文件压缩 import java.io.File; import java.io.FileInputStream; import j ...

随机推荐

  1. Codeforces 1245 E. Hyakugoku and Ladders

    传送门 显然这个图是个 $DAG$ ,那么就可以考虑跑 $dp$ 了 先考虑没有梯子的情况,首先把每个位置标号,越后面的位置编号越小,终点位置编号为 $1$ 那么从终点往起点 $dp$ ,枚举当前位置 ...

  2. js中new到底做了什么?

    1.创建一个新的obj; 2.让obj_proto_=Func.prototype; 3.Func.call(obj);

  3. Java中常见时间类的使用

    模拟场景针对于常用的操作API,比如流操作(字符流.字节流),时间操作等,仅仅了解概念性的定义终究是无法了解该类的用途和使用方式:这种情况在使用的时候便一脸茫然,脑海中映射不到对应的知识点.本篇博客将 ...

  4. Java 之 可变参数

    可变参数 在JDK1.5之后,如果我们定义一个方法需要接受多个参数,并且多个参数类型一致,我们可以对其简化成如下格式: 修饰符 返回值类型 方法名(参数类型... 形参名){ } 其实这个书写完全等价 ...

  5. SQL将同样标识的查询结果查重并用逗号拼接

    SELECT B.TaskID , LEFT(SamList, LEN(SamList) - 1) AS ResultListFROM ( SELECT TaskID , ( SELECT Sampl ...

  6. 映射重复导致的错误:Ambiguous handler methods mapped for HTTP path

    转自:https://cloud.tencent.com/developer/article/1372150 出现了两个名称一样的映射,会报如下错误: 原因: 解决方法: 出现Ambiguous Ma ...

  7. Manifold learning 流形学习

    Machine Learning 虽然名字里带了 Learning 一个词,让人乍一看觉得和 Intelligence 相比不过是换了个说法而已,然而事实上这里的 Learning 的意义要朴素得多. ...

  8. 【Distributed】分布式锁

    一.概述 1.1 分布式解决的核心思路 1.2 分布式锁一般有三种实现方式 二.基于Redis的分布式锁 2.1 使用常用命令 2.2 实现思路 2.3 核心代码 Maven依赖信息 LockRedi ...

  9. 【appium】appium中的元素定位和基本操作

    # coding=utf-8 from appium import webdriver import time from selenium.webdriver.support.ui import We ...

  10. 彻底弄懂HTTP缓存机制及原理-转载

    首先附上原文地址,非常感谢博主大神的分享彻底弄懂HTTP缓存机制及原理 前言     Http 缓存机制作为 web 性能优化的重要手段,对于从事 Web 开发的同学们来说,应该是知识体系库中的一个基 ...