/moveSpider

创建工程

Primary LanguageHTML

moveSpider

电影,电视剧爬虫

  • step 1 clawer move from move website,and make a crontab job to clawer every day

  • step 2 generate out.html, and out.json

  • step 3 make an android app,user out.json ,show move list to me

#秀一下在android app上看到的货 image

#todo

  1. 目前爬虫是一个单线程的,需要完善成多线程,开取5个线程同时爬取
  2. 目前爬取内容单一,只有电影,没有电视剧,也没有做分类,希望可以分类
  3. 目前只是已html,json文件存储,希望可以存db