一个nodejs写的爬虫
##功能
- 从博客园文章列表爬取文章
- 将爬取的用户信息，文章信息写入mongodb数据库中
##项目中核心库
- async 控制并发
- mongoose 建立数据库链接
- eventproxy 管理回调函数
- dom解析模块
- superagent 建立http请求
##使用方法
node start.js
-
Notifications
You must be signed in to change notification settings - Fork 0
一个nodejs写的爬虫
License
guoliangli123/nodeSpider
Folders and files
| Name | Name | Last commit message | Last commit date | |
|---|---|---|---|---|
Repository files navigation
About
一个nodejs写的爬虫
Resources
License
Stars
Watchers
Forks
Releases
No releases published
Packages 0
No packages published