Popular repositories Loading

1. spilderByProxy spilderByProxy Public

   搜狗的微信文章具有反爬虫措施，同一IP频繁访问多次会被禁止，所以调用一个代理池，不停的切换ip访问。

   Python 4 4

2. - - Public

   这是一款采用HTML和javascript制作的游戏，玩家可根据显示的字体的颜色（非文字本身的意义，注意这里有坑），在灯光 路过下方的颜色按钮时，迅速选中颜色按钮。玩家可根据熟练程度自定义难度等级。

3. spiders spiders Public

   简单的网络爬虫，获取书名，作者等信息。

   Python

4. selenium selenium Public

   使用webdriver调用chrome浏览器，实现自动搜索selenium

   Python

5. movietop100 movietop100 Public

   抓取猫眼电影的top1oo数据，并存储到本地的文件中，使用pool多进程处理

   Python

6. spiderPicture spiderPicture Public

   获取今日头条的街拍的，图片并存储到Mongodb中，由于，详情页的图片是通过ajax获取，所以需要从js中解析出详情页的url

   Python