• 技术文章 >web前端 >js教程

    Nodejs中使用string_decoder模块将buffer转成string

    青灯夜游青灯夜游2021-05-14 11:00:36转载614
    本篇文章给大家介绍一下Nodejs中使用string_decoder模块将buffer转成string的方法。有一定的参考价值,有需要的朋友可以参考一下,希望对大家有所帮助。

    模块简介

    string_decoder模块用于将Buffer转成对应的字符串。使用者通过调用stringDecoder.write(buffer),可以获得buffer对应的字符串。【推荐学习:《nodejs 教程》】

    它的特殊之处在于,当传入的buffer不完整(比如三个字节的字符,只传入了两个),内部会维护一个internal buffer将不完整的字节cache住,等到使用者再次调用stringDecoder.write(buffer)传入剩余的字节,来拼成完整的字符。

    这样可以有效避免buffer不完整带来的错误,对于很多场景,比如网络请求中的包体解析等,非常有用。

    入门例子

    这节分别演示了decode.write(buffer)decode.end([buffer])两个主要API的用法。

    例子一:

    decoder.write(buffer)调用传入了Buffer对象<Buffer e4 bd a0>,相应的返回了对应的字符串;

    const StringDecoder = require('string_decoder').StringDecoder;
    const decoder = new StringDecoder('utf8');
    
    // Buffer.from('你') => <Buffer e4 bd a0>
    const str = decoder.write(Buffer.from([0xe4, 0xbd, 0xa0]));
    console.log(str);  // 你

    例子二:

    decoder.end([buffer])被调用时,内部剩余的buffer会被一次性返回。如果此时带上buffer参数,那么相当于同时调用decoder.write(buffer)decoder.end()

    const StringDecoder = require('string_decoder').StringDecoder;
    const decoder = new StringDecoder('utf8');
    
    // Buffer.from('你好') => <Buffer e4 bd a0 e5 a5 bd>
    let str = decoder.write(Buffer.from([0xe4, 0xbd, 0xa0, 0xe5, 0xa5]));
    console.log(str);  // 你
    
    str = decoder.end(Buffer.from([0xbd]));
    console.log(str);  // 好

    例子:分多次写入多个字节

    下面的例子,演示了分多次写入多个字节时,string_decoder模块是怎么处理的。

    首先,传入了<Buffer e4 bd a0 e5 a5>还差1个字节,此时,decoder.write(xx)返回

    然后,再次调用decoder.write(Buffer.from([0xbd])),将剩余的1个字节传入,成功返回

    const StringDecoder = require('string_decoder').StringDecoder;
    const decoder = new StringDecoder('utf8');
    
    // Buffer.from('你好') => <Buffer e4 bd a0 e5 a5 bd>
    let str = decoder.write(Buffer.from([0xe4, 0xbd, 0xa0, 0xe5, 0xa5]));
    console.log(str);  // 你
    
    str = decoder.write(Buffer.from([0xbd]));
    console.log(str);  // 好

    例子:decoder.end()时,字节数不完整的处理

    decoder.end(buffer)时,仅传入了的第1个字节,此时调用decoder.end(),返回了,对应的buffer为<Buffer ef bf bd>

    const StringDecoder = require('string_decoder').StringDecoder;
    
    // Buffer.from('好') => <Buffer e5 a5 bd>
    let decoder = new StringDecoder('utf8');
    let str = decoder.end( Buffer.from([0xe5]) );
    console.log(str);  // �
    console.log(Buffer.from(str));  // <Buffer ef bf bd>

    官方文档对于这种情况的解释是这样的(跟废话差不多),大约是约定俗成了,当utf8码点无效时,替换成ef bf bd

    Returns any remaining input stored in the internal buffer as a string. Bytes representing incomplete UTF-8 and UTF-16 characters will be replaced with substitution characters appropriate for the character encoding.

    相关链接

    你应该记住的一个UTF-8字符「EF BF BD」http://liudanking.com/golang/utf-8_replacement_character/

    更多编程相关知识,请访问:编程视频!!

    以上就是Nodejs中使用string_decoder模块将buffer转成string的详细内容,更多请关注php中文网其它相关文章!

    声明:本文转载于:掘金社区,如有侵犯,请联系admin@php.cn删除
    上一篇:学会这20+个JavaScript单行代码,让你像专业人士一样编写代码 下一篇:浅谈angular控制器通信的4种方式
    大前端线上培训班

    相关文章推荐

    • 详解Linux服务器中部署Nodejs项目的方法• 深入浅析Nodejs中的“洋葱模型”• 聊聊Nodejs获取参数的四种方法• 如何升级或修改nodejs的版本• 深入浅析Node.js中的进程和线程• 详解nodejs在控制台打印高亮代码的方法

    全部评论我要评论

  • 取消发布评论发送
  • 1/1

    PHP中文网