理解nodejs的stream和pipe机制
来源:互联网 发布:matlab 数组元素求和 编辑:程序博客网 时间:2024/05/16 09:48
前言
前几天别人请教我关于pipe的问题,我发现我虽然用了nodejs很久,但是由于每次用的不多所以经常回避stream的使用,导致一直不熟,现在重新学习整理一下相关知识。
通过nodeschool学习stream
nodeschool有一个stream-adventure教程教导stream的使用,很简单
简单stream进行pipe
首先,我们可以通过管道将输入定位到输出,输入输出可以是控制台或者文件流或者http请求,比如
process.stdin.pipe(process.stdout)process.stdin.pipe(fs.createWriteStream(path))fs.createReadStream(path).pipe(process.stdin)
pipe中间进行处理
如果我们想要在管道中间进行处理,比如想将输入的字符串变成大写写到输出里,我们可以使用一些可以作为中间处理的框架,比如through2就很方便
var through2 = require('through2');var stream = through2(write,end)process.stdin .pipe(stream) .pipe(process.stdout);function write(line,_,next){ this.push(line.toString().toUpperCase()) next();})function end(done){ done();})
stream转化成普通回调
当我们输入是流,而输出是个普通函数,我们需要把输入流转化为普通的buffer,这时可以试用concat-stream库
var concat = require('concat-stream');var reverseStream=concat(function(text){ console.log(text.toString().split("").reverse().join(""));})process.stdin.pipe(reverseStream)
http server中的流
类似stdin和fs,http由于其特性也适合使用流,所以其自带类似特性
var http = require('http');var server = http.createServer(function(req,res){ req.pipe(res);})
既作为输入也作为输出的流
request框架实现了如下功能,将一个流pipe到request请求中,然后将流的内容发给服务器,然后返回作为流供其他代码使用,实现如下
var request = require('request');var r = request.post('http://localhost:8099');process.stdin.pipe(r).pipe(process.stdout)
分支管道
下边是一个例子,这个例子将输入管道中html包含loud class的元素放入另一个管道进行大写操作,然后最后合并成输出
var trumpet = require('trumpet');var through2 = require('through2');var fs = require('fs');var tr = trumpet();var stream = tr.select('.loud').createStream();var upper = through2(function(buf,_,next){ this.push(buf.toString().toUpperCase()); next();})stream.pipe(upper).pipe(stream);process.stdin.pipe(tr).pipe(process.stdout);
合并输入输出stream例子
合并后的输入输出可像前文request一样使用,下边这个例子实现了使用流的方式进行子进程调用
var spawn = require('child_process').spawn;var duplexer2 = require('duplexer2');module.exports = function(cmd, args){ var c = spawn(cmd,args) return duplexer2(c.stdin,c.stdout)}
总结
通过上边的例子,可以知道stream应该还有如何合并等更复杂的应用方式。总之整体上符合如下特性:
- Stream分为readable、writeble
- Stream通过pipe方法控制流向
- httpServer和httpClient和file system和process.stdin\out\err通常可以作为stream
- Stream可以被on(event)转化为普通的变量,普通变量可以被write转换成stream
- Stream自身可以被拆分、合并、过滤
2 0
- 理解nodejs的stream和pipe机制
- nodejs中流(stream)的理解
- nodejs中流(stream)的理解
- nodejs中流(stream)的理解
- [前端] nodejs中流(stream)的理解
- nodejs Stream使用手册——pipe
- NodeJS Stream的双工流
- Linux下的管道pipe----管道容量和实现机制
- nodejs stream
- 关于NodeJS的Cookie和Session机制
- jsch 【stream的理解】
- 理解NodeJS事件循环机制
- linux pipe理解和父子进程
- nodejs的模块机制
- nodeJs的事件机制
- NodeJS的模块机制
- nodejs的路由机制
- session机制和cookie机制的理解
- 使用XUtils上传文件(初始版,待整理)
- RX-93-v GUNDAM VER.KA
- iOS每日一记之————AlertView的BUG解决 限制textField的字数长度 ScrollerView的上划键盘下去
- Form widgets for many2many fields in Odooj添加多个图片
- JAVA之初体验
- 理解nodejs的stream和pipe机制
- lintcode-最长连续子序列
- 格式化控制台输出颜色
- mysql共享表空间和独立表空间
- UIActivityIndicatorView的使用
- 在Servlet中引用json-lib-2.4-jdk15.jar报错的问题的解决办法
- codeforce--Vasya and Petya's Game
- 《程序员面试金典》--像素反转
- C++那些细节--typedef关键字