/awesome-python-crawl

python crawl projects, including selenium crawl with requests and crawl with scrapy and all esay for redesign

Primary LanguagePython

Python Crawl tutorials

使用python爬取网站示例，包括使用scrapy，request，以及模拟浏览器爬取网站的示例代码

目录介绍

  • scrapy_tutorial

    该文件夹包含使用scrapy进行爬取网站的项目代码，目前包含：

    ganji 为使用scrapy 进行爬取搜狐新车的代码项目

    项目持续添加中......

  • selenium_crawl_tutorial

    该文件夹包含使用python+requests+selenium+chromedriver模拟浏览器进行爬取网站的项目代码，目前包含：

    selenium_crawl_tutorial 为模拟浏览器爬取**债券信息网企业债板块对应内容的抓取与下载项目代码

    项目持续添加中......