/craw_new

Primary LanguagePython

1,将能用的代理ip放入ip1.py,开启mongo,认真阅读craw_main.py文件main函数中的注释即可 2,search是处理爬虫完毕的数据库的脚本,运行时用:python3 search.py>search.data,这样数据会写入search.data,,随心所欲地更改这个脚本就可以获得想要的数据结果了