weixin_article_spiders

weixin

A spiders' program for weixin which made by Express & cheerio

1. 這個爬蟲小軟體，透過呼叫「搜狗」 微信搜尋的接口，捕捉到相應的資源。
2. 透過cheerio對文章進行篩選。
3. 透過fs 模組在res 資料夾下產生對應的JSON 和img 資源。

注意這個小軟體分為

• 透過關鍵字查詢列表
• 透過指定的url 查單一文章，須是單一文章的網址，文章列表的網址不行

捕獲的資源

• 透過關鍵字搜尋出來的微信文章清單會保存在/res/list 下面
  • 在文章清單中選擇「抓取此條」 之後，會將此條文章儲存在/res/oneArticle 下面
• 透過指定url 抓取出來的圖片和文章會儲存到/res/img-txt 下面

如何運作

npm install

然後運行node app.js

登入http://localhost:3000