/WeiBoHotSearch_DailyChange

这是一个微博热搜爬虫&动态可视化展示的项目，持续更新中

Primary LanguagePython

微博热搜爬虫 & 时序动态可视化

版本概览

版本号 项目进度
v1.0 利用Scrapy爬取微博热搜
数据以json文件保存
start_urls未批量导入
v1.1 手动批量获得日期
新增TDengine数据管道
v1.2 scrapyd简单部署
v1.3 搭建scrapyd爬虫服务器
使用Nginx反向代理添加用户认证
v1.4 新增MongoDB数据管道
新增MySQL数据管道
新增Elasticsearch数据管道
v1.5 新增请求数据接口
新增动态可视化文件