USTBCrawlers

那些年，我爬过的北科。一个由浅入深的定向爬虫教程。

开发环境

python3.6

目录

• 那些年，我爬过的北科(序)——我和爬虫的缘分
• 那些年，我爬过的北科(一)——爬虫基础之环境搭建与入门
• 那些年，我爬过的北科(二)——爬虫基础之session登陆
• 那些年，我爬过的北科(三)——爬虫进阶之多进程的使用
• 那些年，我爬过的北科(四)——爬虫进阶之极简并行爬虫框架开发
• 那些年，我爬过的北科(五)——数据存储之使用MongoDB
• 那些年，我爬过的北科(六)——反反爬虫之js渲染
• 那些年，我爬过的北科(七)——反反爬虫之使用代理ip
• 那些年，我爬过的北科(八)——反反爬虫之验证码识别
• 那些年，我爬过的北科(九)——搜索案例之爬虫编写
• 那些年，我爬过的北科(十)——搜索案例之ElasticSearch的使用

关注我

LICENSE

GPL-3.0