spider-for-51job

Python期末大作业，基于selenium的51job网站爬虫与数据可视化分析

配置环境

conda env create -f environment.yaml

pip install -r requirements.txt

运行爬虫

python ./GetData.py

创建数据库和表

使用SQL Server数据库

创建表：CreateTable.sql文件

数据入库

python ./DataStorage.py

数据可视化

python ./DataView