/Hotspot

微博,百度热搜爬虫

Primary LanguagePythonMIT LicenseMIT

Hotspot

微博,百度热搜爬虫

项目结构

.
├── dao                          # 数据连接层
├── Hotspot                      # 核心爬虫业务
├── LICENSE
├── logs                         # 日志文件存储目录
├── logs_delete.sh               # 日志清理脚本
├── README.md                    # 项目说明
├── requirements.txt             # 依赖包
├── run.py                       # 程序入口
├── save_data.py                 # 数据处理层
├── scrapy.cfg
├── spider.sh                    # 程序启动脚本
└── utils                        # 通用工具配置