电影,电视剧爬虫
-
step 1 clawer move from move website,and make a crontab job to clawer every day
-
step 2 generate out.html, and out.json
-
step 3 make an android app,user out.json ,show move list to me
#todo
- 目前爬虫是一个单线程的,需要完善成多线程,开取5个线程同时爬取
- 目前爬取内容单一,只有电影,没有电视剧,也没有做分类,希望可以分类
- 目前只是已html,json文件存储,希望可以存db