Pinned Repositories
lofterSpider
lofter的爬虫,爬所有点过的喜欢/推荐/tag、爬取个人主页。l8和l10还没更新暂时用不了
weibo_spider-scrapy
微博的爬虫,爬个人主页,用的scrapy 框架
weibo_spider
新浪微博爬虫,保存一个用户发过的所有内容,保存包括原链接、正文、评论等21个字段(停止更新)(微博换新UI后已无法使用,主页有匹配新UI的项目可以用那个)
zhihu_hot_spider
知乎热榜爬虫,分布式爬虫框架练习
IshtarTang's Repositories
IshtarTang/lofterSpider
lofter的爬虫,爬所有点过的喜欢/推荐/tag、爬取个人主页。l8和l10还没更新暂时用不了
IshtarTang/weibo_spider-scrapy
微博的爬虫,爬个人主页,用的scrapy 框架
IshtarTang/weibo_spider
新浪微博爬虫,保存一个用户发过的所有内容,保存包括原链接、正文、评论等21个字段(停止更新)(微博换新UI后已无法使用)
IshtarTang/zhihu_hot_spider
知乎热榜爬虫,分布式爬虫框架练习