一个分布式爬虫抓取瓜子二手车网中的已成交汽车数据
Switch branches/tags
Nothing to show
Clone or download
Fetching latest commit…
Cannot retrieve the latest commit at this time.
Permalink
Type Name Latest commit message Commit time
Failed to load latest commit information.
DB
HTTP
js
log
source
BrandSeriseHandler.py
LoginHandler.py
PersistenceMangement.py
README.md
ScheduleHandler.py
SeedsHandler.py
SeedsMangement.py
SessionMangement.py
SlaverHandler.py
SpiderHandler.py
UserAgent.py
config.py
geckodriver.log
utils.py

README.md

  • 2018.09.18

发现瓜子二手车网应该是更新的反爬虫策略

通过代码模拟的请求,在验证token后,均返回302

就算新手机号去请求仍旧返回相同的结果

  • 2018.09.26

完成迭代 目前测试中,程序可以持续跑