右键复制完整的Xpath,这样省着我们一个一个去查找了 而且如果Xpath换了,也可以很简单的修改源码
- 下载Chrome浏览器,然后去https://npm.taobao.org/mirrors/chromedriver/下载对应之前下载的Chrome浏览器版本的chromedriver.exe
- 将下载好的chromedriver.exe放入python.exe的所在文件夹,然后再放入chrome.exe的所在文件夹。
- 将chrome.exe的所在文件夹设到系统变量中。
这里我用的小猫的代理,默认是7890,如果需要可以更改源码,或者使用-po参数指定127.0.0.1:port
python .\Googel_Crawler.py -s "site:lzu.edu.cn" -p 3 -t 5 --gpu