mokusolo/doubanMovie250

scrapySomething

Python

scrapy爬取豆瓣电影前250

记录使用过程

$ virtualenv scrapySth（为了各环境的独立性，创建虚拟环境）
$ cd scrapySth
$ source bin/activate（激活虚拟环境）
$ pip3 install scrapy（在虚拟环境中安装scrapy，安装完成后终端 $ scrapy 能看到版本信息等说明安装成功）
$ scrapy startproject doubanMovie250
$ cd doubanMovie250
（根据需求更改）
$ scrapy crawl doubanMovie250 -o doubanMovie250.csv