使用await和async关键字开发nodejs应用批量取出简书网站的文章标题和超链接
生活随笔
收集整理的這篇文章主要介紹了
使用await和async关键字开发nodejs应用批量取出简书网站的文章标题和超链接
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
ES6的await和async出來已經那么久了,一起來學習一下吧。
還是用我之前的讀取某個簡書用戶所有文章列表的例子。
先看主函數框架:
async function downloadArticle(pageNumber){var url = PAGE + pageNumber;console.log("current page: " + url);var pageOptions = {url: url,method: "GET",headers: {"Accept": "text/html"}};try{var downloadedPage = await getArticles(pageOptions, pageNumber);console.log('downloaded Page number: ' + downloadedPage);}catch(error){console.error(error);} }async用來表示函數是異步的,定義的函數會返回一個promise對象,可以使用then方法添加回調函數。
而await 可以理解為是 async wait 的簡寫。await 必須出現在 async 函數內部,不能單獨使用。我這里的await后面帶的getArticles,其實是一個promise包裹的nodejs request module調用,源代碼如下:
function getArticles(pageOptions, pageNumber) {return new Promise(function(resolve,reject){var requestC = request.defaults({jar: true});requestC(pageOptions,function(error,response,body){if( error){console.log("error: " + error);resolve(error);}var document = new JSDOM(body).window.document;var content = document.getElementsByTagName("li");for( var i =0; i < content.length; i++){var li = content[i];var children = li.childNodes;for( var j = 0; j < children.length; j++){var eachChild = children[j];if( eachChild.nodeName == "DIV"){var grandChild = eachChild.childNodes;for( var k = 0; k < grandChild.length; k++){var grand = grandChild[k];if( grand.nodeName == "A"){var fragment = grand.getAttribute("href");if( fragment.indexOf("/p") < 0)continue;console.log("title: " + grand.text);var wholeURL = PREFIX + fragment;console.log("url: " + wholeURL);if( mArticleResult.has(grand.text)){lastPageReached = true;console.log("article size: " + mArticleResult.size);resolve(pageNumber);}mArticleResult.set(grand.text, wholeURL);}}}}}// end of outer loopresolve(pageNumber);}); }); }在nodejs里執行上面這段代碼,輸出:
[圖片]
要獲取更多Jerry的原創文章,請關注公眾號"汪子熙":總結
以上是生活随笔為你收集整理的使用await和async关键字开发nodejs应用批量取出简书网站的文章标题和超链接的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 空调粗管结霜怎么修(如何选择空调)
- 下一篇: 笔记本4g和8g差别大吗(2023笔记本