我的博客热点展示:https://www.panglb.top/hot/
├── crawler.py 所有爬取内容的函数
├── helper.py
├── LICENSE
├── README.md
├── requments.txt 环境依赖包
├── result 保存爬取结果的文件夹
├── run.py 运行入口
└── settings.py 配置文件
-
目前只写了以下热点信息的爬取
- 知乎热榜
- V2EX
- GitHub
- 新浪微博
- 天涯
- 贴吧
- 豆瓣
- 云音乐
-
环境
- python3
-
运行
-
下载
git clone https://github.com/pangxiaobin/CrawlerHot.git cd CrawlerHot
-
安装依赖
pip install -r requments.txt
-
运行
python run.py
-