前言:最近想學(xué)習(xí)node.js,突然在網(wǎng)上看到基于node的爬蟲制作教程,所以簡單學(xué)習(xí)了一下,把這篇文章分享給同樣初學(xué)node.js的朋友。
目標(biāo):爬取 http://tweixin.yueyishujia.com/webapp/build/html/ 網(wǎng)站的所有門店發(fā)型師的基本信息。
思路:訪問上述網(wǎng)站,通過chrome瀏覽器的network對網(wǎng)頁內(nèi)容分析,找到獲取各個(gè)門店發(fā)型師的接口,對參數(shù)及返回?cái)?shù)據(jù)進(jìn)行分析,遍歷所有門店的所有發(fā)型師,直到遍歷完畢,同事將信息存儲(chǔ)到本地。
步驟一:安裝node.js
下載并安裝node,此步驟比較簡單就不詳細(xì)解釋了,有問題的可以直接問一下度娘。
步驟二:建立工程