/ImageSpider

scrapy爬取网站上的所有图片

Primary LanguagePython

ImageSpider

如何使用

  1. ImageSpider\ImgInWebsite\spiders\ImgSpider.py文件中的allowed_domains = ["www.meizu.com"]start_urls = ['http://www.meizu.com/']中的地址换成自己想要爬取图片网站的地址。
  2. 运行命令scrapy crawl ImgSpider
  3. 本地生成一个imgs.txt文件,其中有全部图片的下载地址

更多

使用scrapy爬取网站上的所有图片