利用 Scrapy
来抓取数据,利用 flask
来进行展示
实现步骤:
-
创建 virtualenv.
pip install -r requirements.txt
安装所需扩展 -
scrapy crawl
来抓取对应数据 -
python manage.py runserver
来执行
-
关于使用 scrapy 和 flask 连接 MySQL 请参见博文
-
关于 scrapy 爬虫信息请参见 repo:scrpay-demos
One Project that scrawls the data from websites(Commercial,UGC,News.e.g) and shows
Python
利用 Scrapy
来抓取数据,利用 flask
来进行展示
实现步骤:
创建 virtualenv.pip install -r requirements.txt
安装所需扩展
scrapy crawl
来抓取对应数据
python manage.py runserver
来执行
关于使用 scrapy 和 flask 连接 MySQL 请参见博文
关于 scrapy 爬虫信息请参见 repo:scrpay-demos