• Node.js数据流


    数据读写可以看作是事件模式(Event)的特例,不断发送的数据块好比一个个的事件。读数据是read事件,写数据是write事件,而数据块是事件附带的信息。Node 为这类情况提供了一个特殊接口Stream。
    一、概述
    “数据流”(stream)是处理系统缓存的一种方式。操作系统采用数据块(chunk)的方式读取数据,每收到一次数据,就存入缓存。Node应用程序有两种缓存的处理方式:
    第一种是等到所有数据接收完毕,一次性从缓存读取,这就是传统的读取文件的方式;这种方式先将数据全部读入内存,然后处理,优点是符合直觉,流程非常自然,缺点是如果遇到大文件,要花很长时间,才能进入数据处理的步骤。
    第二种是采用“数据流”的方式,收到一块数据,就读取一块,即在数据还没有接收完成时,就开始处理它。这种方式每次只读入数据的一小块,像“流水”一样,每当系统读入了一小块数据,就会触发一个事件,发出“新数据块”的信号。应用程序只要监听这个事件,就能掌握数据读取的进展,做出相应处理,这样就提高了程序的性能。
    二、什么是流?
    流是可以从一个源读取或写入数据到连续的目标对象。在Node.js,有四种类型的数据流。
    Readable - 其是用于读操作。
    Writable - 用在写操作。
    Duplex - 其可以用于读取和写入操作。
    Transform - 输出基于输入的地方进行计算的一种双相流。
    每种类型的流是一个EventEmitter实例,并抛出的不同的事件。
    例如,一些常用的事件是:
    data - 当有数据可读取此事件。
    end - 当没有更多的数据读取此事件被触发。
    error - 当有任何错误或接收数据写入此事件。
    finish - 当所有数据已刷新到底层系统触发此事件
    1、从流中读取:fs模块的createReadStream方法,就可以创建一个读取数据的数据流。
    var fs = require("fs");
    var data = '';

    // 建立一个输入流
    var readerStream = fs.createReadStream('./input.txt');
    // 设置字符集. 
    readerStream.setEncoding('UTF8');
    // 绑定流事件 --> data, end, and error
    readerStream.on('data', function(chunk) {
       data += chunk;
    });
    readerStream.on('end',function(){
       console.log(data);
    });
    readerStream.on('error', function(err){
       console.log(err.stack);
    });
    console.log("Program Ended");

    2、写入流:fs模块的createWriteStream方法,就可以创建一个写数据的数据流。
    var fs = require("fs");
    var data = '德云IT学院';

    // 创建一个写入流
    var writerStream = fs.createWriteStream('./output.txt');
    // 设置写入数据的字符集
    writerStream.write(data,'UTF8');
    //文件结束退出
    writerStream.end();
    // 绑定流事件 --> finish, and error
    writerStream.on('finish', function() {
        console.log("Write completed.");
    });
    writerStream.on('error', function(err){
       console.log(err.stack);
    });
    console.log("Program Ended");

    3、管道流:管道是供一个流的输出作为输入到另一个流的机制。它通常被用于从一个流中获取数据,并通过该流输出到另一个流。
    例如:一个管道从一个文件中读取和写入到另一个文件
    var fs = require("fs");
    // 创建一个可读流
    var readerStream = fs.createReadStream('./input.txt');
    // 创建一个可写流
    var writerStream = fs.createWriteStream('./output.txt');
    // 通过管道进行读和写操作
    // 读取input.txt,并将数据写入output.txt
    readerStream.pipe(writerStream);
    console.log("Program Ended");

    4、链式流:链式是一个机制,一个流的输出连接到另一个流,并创建一个链多流操作。它通常用于管道的操作。
    例如:使用管道和链接先压缩文件,然后解压缩
    4.1:压缩文件
    var fs = require("fs");
    var zlib = require('zlib');

    // 将input.txt文件压缩为input.txt.zip
    fs.createReadStream('./input.txt')
      .pipe(zlib.createGzip())
      .pipe(fs.createWriteStream('./input.txt.zip'));
      
    console.log("File Compressed.");
    4.2:解压文件
    var fs = require("fs");
    var zlib = require('zlib');

    // 解压文件input.txt.zip到demo.txt
    fs.createReadStream('./input.txt.zip')
      .pipe(zlib.createGunzip())
      .pipe(fs.createWriteStream('./demo.txt'));
      
    console.log("File Decompressed.");

  • 相关阅读:
    Nucleus 的网络部分
    VS2005中TextBox的ReadOnly属性(转贴)
    VS2005中TextBox的ReadOnly属性导致的问题
    外部中断
    Linux操作系统文件链接问题
    IIS 服务不能自动启动
    转贴:[C++]static用法
    串口测试的一些体会
    字符串的两种声明方式
    Tornado 2.2 中vxsim出问题的解决方法
  • 原文地址:https://www.cnblogs.com/lone5wolf/p/15831776.html
Copyright © 2020-2023  润新知