nodejs中实现阻塞实例


Posted in NodeJs onMarch 24, 2015

node.js中与生俱来的单线程编程、回调函数异步式风格让我们有时喜有时忧。先说单线程,很多人会费解于node.js的单线程如何能做到高并发?这个问题不是本文重点,点到为止。澄清一点,node.js的单线程仅仅指javascript引擎是单线程的,无论如何我们没有办法在javascript中实现多线程和阻塞(本文用到的方法同样不是通过V8引擎实现同步的);但对于node.js的其他方面不代表不能多线程,例如IO。如果现在node.js遭受大量请求,而这些请求都是IO密集型的,那么此时node每接受一个请求,在遇到耗时较长的IO操作时,javascript线程并不会一直在此等待,而是交出控制,在回调堆栈里添加IO操作完成后要执行的操作(当回调层级过多,访问数量过大,大量的回调链可能会爆栈)。而在这段时间内,node.js又可以处理其他请求了。所以对于node.js而言,虽然javascript是单线程的,每次只能处理一个请求,但javascript处理一个请求的时间往往较短(对于IO密集型应用而言),只要可以异步处理,那么在处理的过程中,此次请求都会释放控制,使node.js能处理其他请求。这并发请求的同时,IO其实一直处于并发状态,减少处理请求的线程数,节约资源以增加IO的线程数,对于通常耗时很长的IO密集型请求来说,无疑能带来性能上的提升。

前面???锣碌匾恢痹谇康?O密集型,其实是在强调node.js的强项。相应的,它的短板就是CPU密集型的请求。道理很简单,javascript不会并发,只能一个请求完成后才能处理其他请求。一个请求处理的时间越长,其他请求等待的时间越长。同一时间只会有一个请求被处理,并发性能很低。

话说到这儿,我想申明一点:node.js不应该被阻塞;能异步处理的方法异步处理(如使用fs.readFile(),而非fs.syncReadFile()fs.readFileSync()方法)。

node中不能阻塞,并不代表node外不能阻塞。前面我们有讲到fibers,现在,我们就来尝试在fibers中实现阻塞。就以处理一个http请求为例吧:

var Fiber = require('fibers');

var http = require("http");

Fiber(function () {

    var httpFiber = Fiber.current;

    var html = "";

    http.get("http://www.baidu.com", function (res) {

        var dataFiber = Fiber.current;

        res.on("data", function (data) {

            html += data;

        });

        res.on("end", function (data) {

            httpFiber.run();

        });

    });

    Fiber.yield();

    console.log(html);

}).run();

yield()、 run()这两个方法还不了解的同学,请自行查阅《fibers in node》。

fibers的运行并不在node进程中,所以在fibers内部实现阻塞对node整体的性能并没有影响。而且实现起来也是相当容易,只需要在想阻塞的时候,把fiber yield掉。需要继续运行,则执行 run()恢复fiber。在上面的例子中,我们希望当http.get请求发起时阻塞当前程序,当所有数据接收完成时,恢复程序。于是我们在调用http.get后使用 Fiber.yield()中断此fiber。在对response的监听中,如果触发 end事件表明数据传输完成,于是在 end的回调函数中,调用 Fiber.current.run()恢复fiber,这样,后续的代码就以同步的方式拿到http.get请求的数据。

上面的示例只是提供一种思路。如果对这种思路进行一些抽象封装,比如说,对有接受回调函数为参数的异步方法进行一步柯里化,在调用后中断,并劫持回调函数,以恢复程序的代码为回调函数。获取异步数据后,再程序触发预定的回调函数,这样基本能实现异步方法同步化。这段说得比较乱,基本上就是 fibers/future的实现思路,如果有兴趣,请参考其源代码。

NodeJs 相关文章推荐
NodeJS制作爬虫全过程(续)
Dec 22 NodeJs
浅谈Nodejs观察者模式
Oct 13 NodeJs
nodejs和php实现图片访问实时处理
Jan 05 NodeJs
简单实现nodejs上传功能
Jan 14 NodeJs
利用nodejs监控文件变化并使用sftp上传到服务器
Feb 18 NodeJs
详解NODEJS的http实现
Jan 04 NodeJs
Nodejs实现爬虫抓取数据实例解析
Jul 05 NodeJs
NodeJS加密解密及node-rsa加密解密用法详解
Oct 12 NodeJs
Nodejs处理异常操作示例
Dec 25 NodeJs
nodejs中各种加密算法的实现详解
Jul 11 NodeJs
nodejs脚本centos开机启动实操方法
Mar 04 NodeJs
nodejs中使用worker_threads来创建新的线程的方法
Jan 22 NodeJs
nodejs中使用多线程编程的方法实例
Mar 24 #NodeJs
nodejs中实现sleep功能实例
Mar 24 #NodeJs
nodejs中的fiber(纤程)库详解
Mar 24 #NodeJs
nodeJS代码实现计算交社保是否合适
Mar 09 #NodeJs
Nodejs关于gzip/deflate压缩详解
Mar 04 #NodeJs
nodejs URL模块操作URL相关方法介绍
Mar 03 #NodeJs
Windows系统中安装nodejs图文教程
Feb 28 #NodeJs
You might like
ThinkPHP5.1表单令牌Token失效问题的解决
2019/03/22 PHP
php+mysql开发的最简单在线题库(在线做题系统)完整案例
2019/03/30 PHP
laravel Validator ajax返回错误信息的方法
2019/09/29 PHP
Apache站点配置SSL强制跳转443
2021/03/09 Servers
跟着JQuery API学Jquery 之二 属性
2010/04/09 Javascript
jquery $.getJSON()跨域请求
2011/12/21 Javascript
JavaScript改变HTML元素的样式改变CSS及元素属性
2013/11/12 Javascript
JS中的form.submit()不能提交表单的错误原因
2014/10/08 Javascript
原生js配合cookie制作保存路径的拖拽
2015/12/29 Javascript
JavaScript中获取HTML元素值的三种方法
2016/06/20 Javascript
jQuery Ajax实现跨域请求
2017/01/21 Javascript
详解vue.js 开发环境搭建最简单攻略
2017/06/12 Javascript
jquery.uploadView 实现图片预览上传功能
2017/08/10 jQuery
浅谈node中的cluster集群
2018/06/02 Javascript
JS尾递归的实现方法及代码优化技巧
2019/01/19 Javascript
用node撸一个监测复联4开售短信提醒的实现代码
2019/04/10 Javascript
jquery 验证用户名是否重复代码实例
2019/05/14 jQuery
jQuery实现图片随机切换、抽奖功能(实例代码)
2019/10/23 jQuery
vue在线动态切换主题色方案
2020/03/26 Javascript
Python数据分析之如何利用pandas查询数据示例代码
2017/09/01 Python
基于Python __dict__与dir()的区别详解
2017/10/30 Python
Python定时任务sched模块用法示例
2018/07/16 Python
python 实现求解字符串集的最长公共前缀方法
2018/07/20 Python
python3去掉string中的标点符号方法
2019/01/22 Python
pandas计算最大连续间隔的方法
2019/07/04 Python
使用Python自动生成HTML的方法示例
2019/08/06 Python
英国健身仓库:Bodybuilding Warehouse
2019/03/06 全球购物
在家更换处方镜片:Lensabl
2019/05/01 全球购物
农行实习自我鉴定
2013/09/22 职场文书
高中语文课后反思
2014/04/27 职场文书
销售队伍口号
2014/06/11 职场文书
2014年中职班主任工作总结
2014/12/16 职场文书
悬崖上的金鱼姬观后感
2015/06/15 职场文书
Python中字符串对象语法分享
2022/02/24 Python
Vertica集成Apache Hudi重磅使用指南
2022/03/31 Servers
css中有哪些方式可以隐藏页面元素及区别
2022/06/16 HTML / CSS