Skip to content

最简单的scrapy入门教程,值得读读数据获取方式的两种方式

Notifications You must be signed in to change notification settings

libp/SpiderScrapyArticle

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

13 Commits
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

SpiderScrapyArticle

介绍

  • 基于基于scrapy的最简爬虫工程
  • 目前以实现爬取的网站为-每日一文
  • 写完爬虫后,发现每日一文本身就有对外提供的API[哭脸]

安装使用

  • 初始化数据参考SpiderScrapyArticle工程的sql初始化文件
  • 直接执行get_meiriyiwen_api.py(50行代码),4分钟获取2500+优质文章
  • 忽略z1目录下的scrapy框架吧

相关工程介绍

  • SpiderScrapyArticle,基于scrapy的最简爬虫工程
  • zz,基于springboot4.0+mybatis实现前后端分离
  • zzLite,微信小程序源码
  • littleweb,基于vue的前段web应用源码

Links

zz
zzLite
littleweb
License MIT

About

最简单的scrapy入门教程,值得读读数据获取方式的两种方式

Topics

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published