Node異步編程

Node異步編程

目前的異步編程主要解決方案有:

  • 事件發(fā)布/訂閱模式
  • Promise/Deferred模式
  • 流程控制庫

事件發(fā)布/訂閱模式

Node自身提供了events模塊,可以輕松實(shí)現(xiàn)事件的發(fā)布/訂閱

//訂閱
emmiter.on("event1",function(message){
    console.log(message);
})
//發(fā)布
emmiter.emit("event1","I am mesaage!");

偵聽器可以很靈活地添加和刪除,使得事件和具體處理邏輯之間可以很輕松的關(guān)聯(lián)和解耦
事件發(fā)布/訂閱模式常常用來解耦業(yè)務(wù)邏輯,事件發(fā)布者無需關(guān)注訂閱的偵聽器如何實(shí)現(xiàn)業(yè)務(wù)邏輯,甚至不用關(guān)注有多少個偵聽器存在,數(shù)據(jù)通過消息的方式可以很靈活的進(jìn)行傳遞。
下面的HTTP就是典型的應(yīng)用場景

var req = http.request(options,function(res){
    res.on('data',function(chunk){
        console.log('Body:'+ chunk);
    })
    res.on('end',function(){
        //TODO
    })
})

如果一個事件添加了超過10個偵聽器,將會得到一條警告,可以通過調(diào)用emmite.setMaxListeners(0)將這個限制去掉

繼承events模塊

var events = require('events');
function Stream(){
    events.EventEmiiter.call(this);
}
util.inherits(Stream,events.EventEmitter);

利用事件隊(duì)列解決雪崩問題

所謂雪崩問題,就是在高訪問量,大并發(fā)量的情況下緩存失效的情況,此時大量的請求同時融入數(shù)據(jù)庫中,數(shù)據(jù)庫無法同時承受如此大的查詢請求,進(jìn)而往前影響到網(wǎng)站整體的響應(yīng)速度
解決方案:

var proxy = new events.EventEmitter();
var status = "ready";  
var seletc = function(callback){
    proxy.once("selected",callback);//為每次請求訂閱這個查詢時間,推入事件回調(diào)函數(shù)隊(duì)列
    if(status === 'ready'){ 
        status = 'pending';//設(shè)置狀態(tài)為進(jìn)行中以防止引起多次查詢操作
        db.select("SQL",function(results){
            proxy.emit("selected",results); //查詢操作完成后發(fā)布時間
            status = 'ready';//重新定義為已準(zhǔn)備狀態(tài)
        })
    }
}

多異步之間的協(xié)作方案

以上情況事件與偵聽器的關(guān)系都是一對多的,但在異步編程中,也會出現(xiàn)事件與偵聽器多對一的情況。
這里以渲染頁面所需要的模板讀取、數(shù)據(jù)讀取和本地化資源讀取為例簡要介紹一下

var count = 0 ;
var results = {};
var done = function(key,value){
    result[key] = value;
    count++;
    if(count === 3){
        render(results);
    }
}
fs.readFile(template_path,"utf8",function(err,template){
    done('template',template)
})
db.query(sql,function(err,data){
    done('data',data);
})
l10n.get(function(err,resources){
    done('resources',resources)
})

偏函數(shù)方案

var after = function(times,callback){
    var count = 0, result = {};
    return function(key,value){
        results[key] = value;
        count++;
        if(count === times){
            callback(results);
        }
    }
}
var done = after(times,render);
var emitter = new events.Emitter();
emitter.on('done',done);   //一個偵聽器
emitter.on('done',other);   //如果業(yè)務(wù)增長,可以完成多對多的方案

fs.readFile(template_path,"utf8",function(err,template){
    emitter.emit('done','template',template);
})
db.query(sql,function(err,data){
    emitter.emit('done','data',data);
})
l10n.get(function(err,resources){
    emitter.emit('done','resources',resources)
})

引入EventProxy模塊方案

var proxy = new EventProxy();
proxy.all('template','data','resources',function(template,data,resources){
    //TODO
})
fs.readFile(template_path,'utf8',function(err,template){
    proxy.emit('template',template);
})
db.query(sql,function(err,data){
    proxy.emit('data',data);
})
l10n.get(function(err,resources){
    proxy.emit('resources',resources);
})

Promise/Deferred模式

以上使用事件的方式時,執(zhí)行流程都需要被預(yù)先設(shè)定,這是發(fā)布/訂閱模式的運(yùn)行機(jī)制所決定的。

$.get('/api',{
    success:onSuccess,
    err:onError,
    complete:onComplete
})
//需要嚴(yán)謹(jǐn)設(shè)置目標(biāo)

那么是否有一種先執(zhí)行異步調(diào)用,延遲傳遞處理的方式的?接下來要說的就是針對這種情況的方式:Promise/Deferred模式

Promise/A

Promise/A提議對單個異步操作做出了這樣的抽象定義:

  • Promise操作只會處在三種狀態(tài)的一種:未完成態(tài),完成態(tài)和失敗態(tài)。
  • Promise的狀態(tài)只會出現(xiàn)從未完成態(tài)向完成態(tài)或失敗態(tài)轉(zhuǎn)化,不能逆反,完成態(tài)和失敗態(tài)不能相互轉(zhuǎn)化
  • Promise的狀態(tài)一旦轉(zhuǎn)化,就不能被更改。

一個Promise對象只要具備then()即可

  • 接受完成態(tài)、錯誤態(tài)的回調(diào)方法
  • 可選地支持progress事件回調(diào)作為第三個方法
  • then()方法只接受function對象,其余對象將被忽略
  • then()方法繼續(xù)返回Promise對象,以實(shí)現(xiàn)鏈?zhǔn)秸{(diào)用

通過Node的events模塊來模擬一個Promise的實(shí)現(xiàn)

var Promise = function(){
    EventEmitter.call(this)
}
util.inherits(Promise,EventEmitter);

Promise.prototype.then = function(fulfilledHandler,errHandler,progeressHandler){
    if(typeof fulfilledHandler === 'function'){
        this.once('success',fulfilledHandler); //實(shí)現(xiàn)監(jiān)聽對應(yīng)事件
    }
    if(typeof errorHandler === 'function'){
        this.once('error',errorHandler)
    }
    if(typeof progressHandler === 'function'){
        this.on('progress',progressHandler);
    }
    return this;
}

以上通過then()將回調(diào)函數(shù)存放起來,接下來就是等待success、error、progress事件被觸發(fā),實(shí)現(xiàn)這個功能的對象稱為Deferred對象,即延遲對象。

var Deferred = function(){
    this.state = 'unfulfilled';
    this.promise = new Promise();
}
Deferred.prototype.resolve = function(obj){  //當(dāng)異步完成后可將resolve作為回調(diào)函數(shù),觸發(fā)相關(guān)事件
    this.state = 'fulfilled';
    this.promise.emit('success',obj);
}
Deferred.prototype.reject = function(err){
    this.state = 'failed';
    this.promise.emit('error',err);
}
Deferred.prototype.progress = function(data){
    this.promise.emit('progress',data)
}

因此,可以對一個典型的響應(yīng)對象進(jìn)行封裝

res.setEncoding('utf8');
res.on('data',function(chunk){
    console.log("Body:" + chunk);
})
res.on('end',function(){
    //done
})
res.on('error',function(err){
    //error
}

轉(zhuǎn)換成

res.then(function(){
    //done
},function(err){
    //error
},function(chunk){
    console.log('Body:' + chunk);
})

要完成上面的轉(zhuǎn)換,首先需要對res對象進(jìn)行封裝,對data,end,error等事件進(jìn)行promisify

var promisify = function(res){
    var deferred = new Deferred(); //創(chuàng)建一個延遲對象來在res的異步完成回調(diào)中發(fā)布相關(guān)事件
    var result = ''; //用來在progress中持續(xù)接收數(shù)據(jù)
    res.on('data',function(chunk){ //res的異步操作,回調(diào)中發(fā)布事件
        result += chunk;
        deferred.progress(chunk);
    })
    res.on('end',function(){       
        deferred.resolve(result);
    })
    res.on('error',function(err){
        deferred.reject(err);
    });
    return deferred.promise     //返回deferred.promise,讓外界不能改變deferred的狀態(tài),只能讓promise的then()方法去接收外界來偵聽相關(guān)事件。
}

promisify(res).then(function(){
    //done
},function(err){
    //error
},function(chunk){
    console.log('Body:' + chunk);
})

以上,它將業(yè)務(wù)中不可變的部分封裝在了Deferred中,將可變的部分交給了Promise

Promise中的多異步協(xié)作

Deferred.prototype.all = function(promises){
    var count = promises.length; //記錄傳進(jìn)的promise的個數(shù)
    var that = this; //保存調(diào)用all的對象
    var results = [];//存放所有promise完成的結(jié)果
    promises.forEach(function(promise,i){//對promises逐個進(jìn)行調(diào)用
        promise.then(function(data){//每個promise成功之后,存放結(jié)果到result中,count--,直到所有promise被處理完了,才出發(fā)deferred的resolve方法,發(fā)布事件,傳遞結(jié)果出去
            count--;
            result[i] = data;
            if(count === 0){
                that.resolve(results);
            }
        },function(err){
            that.reject(err);
        });
    });
    return this.promise; //返回promise來讓外界偵聽這個deferred發(fā)布的事件。
}

var promise1 = readFile('foo.txt','utf-8');//這里的文件讀取已經(jīng)經(jīng)過promise化
var promise2 = readFile('bar.txt','utf-8');
var deferred = new Deferred();
deferred.all([promise1,promise2]).thne(function(results){//promise1和promise2的then方法在deferred內(nèi)部的all方法所調(diào)用,用于同步所有的promise
    //TODO
},function(err){
    //TODO
})

支持序列執(zhí)行的Promise

嘗試改造一下代碼以實(shí)現(xiàn)鏈?zhǔn)秸{(diào)用

var Deferred = function(){
    this.promise  = new Promise()
}

//完成態(tài)
Deferred.prototype.resolve = function(obj){
    var promise = this.promise;
    var handler;
    while((handler = promise.queue.shift())){
        if(handler && handler.fulfilled){
            var ret = handler.fulfilled(obj);
            if(ret && ret.isPromise){
                ret.queue = promise.queue;
                this.promise = ret;
                return;
            }
        }
    }
}

//失敗態(tài)
Deferred.prototype.reject = function(err){
    var promise = this.promise;
    var handler;
    while((handler = promise.queue.shift())){
        if(handler && handler.error){
            var ret = handler.error(err);
            if(ret && ret.isPromise){
                ret.queue = promise.queue;
                this.promise = ret;
                return
            }
        }
    }
}

//生成回調(diào)函數(shù)
Deferred.prototype.callback = function(){
    var that = this;
    return function(err,file){
        if(err){
            return that.reject(err);
        }
        that.resolve(file)
    }
}

var Promise = function(){
    this.queue = [];  //隊(duì)列用于存儲待執(zhí)行的回到函數(shù)
    this.isPromise = true;
};
Promise.prototype.then = function(fulfilledHandler,errorHandler,progressHandler){
    var handler = {};
    if(typeof fulfilledHandler === 'function'){
        handler.fulfilled = fulfilledHandler;
    }
    if(typeof errorHandler === 'function'){
        handler.error = errorHandler;
    }
    this.queue.push(handler);
    return this;
}

var readFile1 = function(file,encoding){
    var deferred = new Deferred();
    fs.readFile(file,encoding,deferred.callback());
    return deferred.promise;
}
var readFile2 = function(file,encoding){
    var deferred = new Deferred();
    fs.readFile(file,encoding,deferred.callback());
    return deferred.promise;
}

readFile1('file1.txt','utf8').then(function(file1){
    return readFile2(file1.trim(),'utf8')
}).then(function(file2){
    console.log(file2)
})

流程控制庫另外進(jìn)行總結(jié)

以上參考《深入淺出node.js》一書

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,428評論 6 531
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 98,024評論 3 413
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 175,285評論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經(jīng)常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 62,548評論 1 307
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 71,328評論 6 404
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 54,878評論 1 321
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 42,971評論 3 439
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 42,098評論 0 286
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 48,616評論 1 331
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 40,554評論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 42,725評論 1 369
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,243評論 5 355
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 43,971評論 3 345
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,361評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,613評論 1 280
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,339評論 3 390
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 47,695評論 2 370

推薦閱讀更多精彩內(nèi)容

  • 前言 上一章講解了node如何通過事件循環(huán)實(shí)現(xiàn)異步,包括與各種IO多路復(fù)用搭配實(shí)現(xiàn)的異步IO已經(jīng)與IO無關(guān)的異步A...
    白昔月閱讀 9,791評論 0 6
  • 高階函數(shù):把函數(shù)參數(shù)作為參數(shù),或作為返回值 偏函數(shù): 將傳入?yún)?shù)作為判斷或者其他邏輯條件 注意點(diǎn) 異常處理 異步I...
    wmtcore閱讀 490評論 0 0
  • 函數(shù)式編程 函數(shù)式編程是異步編程的基礎(chǔ),在JS中,將函數(shù)作為參數(shù),返回值,都是可以的。這為我們使用回調(diào)函數(shù)打下了很...
    exialym閱讀 1,521評論 0 5
  • 本文首發(fā)在個人博客:http://muyunyun.cn/posts/7b9fdc87/ 提到 Node.js, ...
    牧云云閱讀 1,697評論 0 3
  • 最近在用node寫一個小爬蟲學(xué)習(xí)node,但是遇到一個不大不小的坑,就是如何將異步的node程序串行執(zhí)行。下面就我...
    大雄good閱讀 2,254評論 0 1