/spider-for-51job

Python期末大作业,基于selenium的51job网站爬虫与数据可视化分析

Primary LanguageHTMLBSD 3-Clause "New" or "Revised" LicenseBSD-3-Clause

spider-for-51job

Python期末大作业,基于selenium的51job网站爬虫与数据可视化分析

配置环境

conda env create -f environment.yaml
pip install -r requirements.txt

运行爬虫

python ./GetData.py

创建数据库和表

使用SQL Server数据库

创建表:CreateTable.sql文件

数据入库

python ./DataStorage.py

数据可视化

python ./DataView