/Spider_Proxy

Python 脚本爬取网上提供的免费代理

Primary LanguagePython

Spider_Proxy

Python 脚本爬取网上提供的免费代理

Data/sql.sql 为数据表结构文件
Data/_check.py 为检查代理是否有效脚本文件
spider_proxy 主要是爬取静态页面,如 xici、kuaidaili、ip89等
spider_proxy_baibian 主要是爬取后期js生成的页面,需要使用phantomjs配置抓取,如 https://www.baibianip.com/home/free.html