说明

本项目是积累个人在日常练习所编写的爬虫脚本，因而彼此之间没有特别说明是可以独立运行。 郑重声名，该项目本人原创，且仅限于学习交流，请勿用于任何商业用途！

目录

[TOC]

travel出行类爬虫

专门爬取与经纬度相关数据

• baidumap-创业园区地点信息收集
• mobike-摩拜骑行数据收集

entertainment娱乐类爬虫

专门一些娱乐网站，如视频网站，娱乐新闻网等相关数据(直播数，直播内容，标签统计数据etc)

• bililive-哔哩哔哩直播房间数据收集
• pybrowser-模拟搜狗搜索的python工具

practical实用类工具

公共类工具列表

• singlethread-download单线程文件下载
• multithread-download多线程文件下载
• parsefont 猫眼字体解析工具
• ice-scrapy 基于ice通信的scrapydemo
• Hash 常用哈希函数
• simple—transapi.py简单翻译api
• proxy构建代理池