JackonYang/distributed-vertical-crawlers

friendList并发抓取

Closed this issue · 2 comments

friendList并发抓取

一个用户的friendlist,一个线程抓取。
只有当批量获取一组用户的friendlist时,并发执行。

使用线程池,threadPool