Caution
目前似乎已经失效,包括微博的url和免费代理。
新浪微博的爬虫。
使用clone
git clone https://github.com/yingjinghuang/WeiboCrawler.git
或者直接Download ZIP获取所有文件
或者直接在release中下载。
WeiboLocationCrawler是对签到页进行爬取的项目
WeiboUserInfoCrawler是对用户信息进行爬取的项目(需要用到你自己的cookie)。
WeiboRepoandComm是对单条微博的评论或者转发进行爬取的项目(可能需要用到你自己的cookie)。
具体项目介绍,请参考具体项目页的README。