Skip to content

用Scrapy实现的一个爬取豆瓣读书TOP250的练手项目,初学者可以参考

License

Notifications You must be signed in to change notification settings

waters00/doubanBookSpider

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

3 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

doubanBookSpider

用Scrapy实现的一个爬取豆瓣读书TOP250的练手项目,初学者可以参考

如何使用

确保安装依赖Python2.7,scrapy,SQLAlchemy

进入目录,执行

scrapy crawl douban-book-spider

即可开始爬取书籍信息

成功的截图

以下命令可以将数据库中数据转换成JSON格式

python parse_to_json.py

About

用Scrapy实现的一个爬取豆瓣读书TOP250的练手项目,初学者可以参考

Resources

License

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages