这是一个自己瞎写着玩的项目
当然,如果帮到了你,那真是太好了
1. mm131spider(已完成)
这是一个针对mm131.com的爬虫项目。网站本身没有特别的反爬措施,只是在Download图片时需要在请求头中加入正确的referer。网站的内容嘛,自己打开看看就知道了~~!
2. homesjpspider(已完成)
这是针对日本房产网站homes.co.jp的爬虫项目,有一些比较棘手反爬措施,比较具有挑战性。
3. joycity_autocheckin(已完成)
这是针对大悦城会员系统的自动每日签到赚积分项目,通过模拟手机端签到请求,达到签到目的。
4. renrenspider(已完成)
这是针对人人网好友相册的爬项目。
5.captcha_recognition(已完成)
某人力系统验证码识学习。用了最简单的机器学习算法——KNN。
6.mainichiNHK(待完成)
每日NHK,目前只有新闻爬虫(下载存储新闻内容以及对应的音频)部分,以后会有配套的移动端。