使用webmagic这一垂直型爬虫框架,爬取qq空间说说,并进行简易数据分析。
最近重新看了下代码,发现现在无法爬取每条说说的赞,赞url的g_tk算法和说说url的g_tk算法不一样,暂时无法爬取,如果大家谁解决了这个问题,或者能够进行模拟登入qq空间,希望可以教我一下哈。
使用webmagic这一垂直型爬虫框架,爬取qq空间说说,并进行简易数据分析。
最近重新看了下代码,发现现在无法爬取每条说说的赞,赞url的g_tk算法和说说url的g_tk算法不一样,暂时无法爬取,如果大家谁解决了这个问题,或者能够进行模拟登入qq空间,希望可以教我一下哈。