nodejs-crawler dev $ git clone https://github.com/davidkoojohn/nodejs-crawler.git // install node_modules $ yarn // start project $ yarn start utility 转md5 superagent 抓取网页 cheerio 分析网页 superagent-charset 解决乱码问题