這篇文章主要介紹了Node爬蟲(chóng)項(xiàng)目的示例分析，具有一定借鑒價(jià)值，感興趣的朋友可以參考下，希望大家閱讀完這篇文章之后大有收獲，下面讓小編帶著大家一起了解一下。

創(chuàng)新互聯(lián)長(zhǎng)期為千余家客戶(hù)提供的網(wǎng)站建設(shè)服務(wù)，團(tuán)隊(duì)從業(yè)經(jīng)驗(yàn)10年，關(guān)注不同地域、不同群體，并針對(duì)不同對(duì)象提供差異化的產(chǎn)品和服務(wù)；打造開(kāi)放共贏平臺(tái)，與合作伙伴共同營(yíng)造健康的互聯(lián)網(wǎng)生態(tài)環(huán)境。為東洲企業(yè)提供專(zhuān)業(yè)的成都網(wǎng)站建設(shè)、做網(wǎng)站，東洲網(wǎng)站改版等技術(shù)服務(wù)。擁有十余年豐富建站經(jīng)驗(yàn)和眾多成功案例,為您定制開(kāi)發(fā)。

First

Introduction

50 lines, minimalist node crawler for Trending.

一個(gè)50行的node爬蟲(chóng)，一個(gè)簡(jiǎn)單的 axios, express, cheerio 體驗(yàn)項(xiàng)目。

Usage

首先保證電腦已存在node環(huán)境，然后

1.拉取本項(xiàng)目

git clone https://github.com/ZY2071/Crawler-for-Github-Trending.git
cd Crawler-for-Github-Trending
npm i
node index.js

2.或者下載本項(xiàng)目壓縮包，解壓

cd Crawler-for-Github-Trending-master // 進(jìn)入項(xiàng)目文件夾
npm i
node index.js

Examples

當(dāng)啟動(dòng)項(xiàng)目后，可以看到控制臺(tái)輸出

Listening on port 3000!

 此時(shí)打開(kāi)瀏覽器，進(jìn)入本地服務(wù) http://localhost:3000/daily

http://localhost:3000/time-language // time表示周期，language代表語(yǔ)言  例如：
http://localhost:3000/daily // 代表今日 可選參數(shù)：weekly,monthly
http://localhost:3000/daily-JavaScript// 代表今日的java分類(lèi) 可選參數(shù)：任意語(yǔ)言

 稍微等待即可看到爬取完畢的返回?cái)?shù)據(jù)：

[
 {
 "title": "lib-pku / libpku",
 "links": "https://github.com/lib-pku/libpku",
 "description": "貴校課程資料民間整理",
 "language": "JavaScript",
 "stars": "14,297",
 "forks": "4,360",
 "info": "3,121 stars this week"
 },
 {
 "title": "SqueezerIO / squeezer",
 "links": "https://github.com/SqueezerIO/squeezer",
 "description": "Squeezer Framework - Build serverless dApps",
 "language": "JavaScript",
 "stars": "3,212",
 "forks": "80",
 "info": "2,807 stars this week"
 },
 ...
]

More

本項(xiàng)目?jī)H供爬取體驗(yàn)，每次訪問(wèn)都會(huì)實(shí)時(shí)爬取數(shù)據(jù)，所以數(shù)據(jù)返回速度會(huì)比較慢，實(shí)際操作應(yīng)該是定時(shí)爬取數(shù)據(jù)然后將數(shù)據(jù)存進(jìn)數(shù)據(jù)庫(kù)，數(shù)據(jù)從數(shù)據(jù)庫(kù)返回從而提高數(shù)據(jù)返回效率。

感謝你能夠認(rèn)真閱讀完這篇文章，希望小編分享的“Node爬蟲(chóng)項(xiàng)目的示例分析”這篇文章對(duì)大家有幫助，同時(shí)也希望大家多多支持創(chuàng)新互聯(lián)，關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道，更多相關(guān)知識(shí)等著你來(lái)學(xué)習(xí)!

文章名稱(chēng)：Node爬蟲(chóng)項(xiàng)目的示例分析-創(chuàng)新互聯(lián)
地址分享：http://www.chinadenli.net/article4/dccdie.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供響應(yīng)式網(wǎng)站、品牌網(wǎng)站設(shè)計(jì)、網(wǎng)站排名、軟件開(kāi)發(fā)、移動(dòng)網(wǎng)站建設(shè)、定制網(wǎng)站

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶(hù)投稿、用戶(hù)轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話(huà)：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)