之前用python实现了一盒简单爬虫,这次还用node实现,体会两者的差异。原理都一样,代码不到100行,这里是源码,数据来源在这里

使用方法

clone并安装:

1
2
3
git clone https://github.com/chayangge/node-crawler.git
cd node-crawler
npm install

运行:

1
node app

会在项目根目录下创建以微信ID命名的文件夹,里面存放抓取后的文章。