Skip to content

CUGbaoyi/ctrip_mafengwo_spider

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

5 Commits
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

gulangyu

data 文件夹里面有建立数据库的sql语句和鼓浪屿的各个景点的poiid和resourceid等值,还有配置文件可以根据自己本地的设置更改

ctrip_all.py 是爬取携程的评论数据

mafengwo_all.py 是爬取蚂蜂窝的数据


更新

更改baseurl 查找自己目标景区的相关url规律,改代码。

先运行get_ctrip_poiid.py 获取poiid以后再运行 ctrip_all.py

如果不需要存入mongo 可以自行删除 相关数据库操作代码

About

No description, website, or topics provided.

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages