有一天想看点福利gif,随便搜了看起来不爽,就写了爬虫都下载下来看. 下了太多了大概2G多了吧,看多了就幡然悔悟了,还是身体重要.删了图片. 但是代码还是分享出来吧
效果图
- mongodb 创建一叫gif的数据库
- 大概2G的硬盘空间
- 一盒餐巾纸
- 会用
node.js
git clone git@github.com:stormslowly/lu.gif.git
cd lu.gif
npm i
node crawl
然后就不需要我教了
代码没有考虑意外中断继续抓取的逻辑,不过完全可以自己改改就能弄了
身体重要