Pinned Repositories
app_spider
抓取豆果美食食谱数据,抓取抖音个人主页视频,通过mitmdump抓取个人粉丝数据,通过appium和多进程实现模拟滑动和多台设备的同时抓取
databases
数据库学习笔记
ecommerce
爬虫电商项目:用scrapy分布式爬虫框架爬取当当商品信息,用selenium模拟登录淘宝和京东收集商品信息
finance
财务python化,效率再提高
js_reverse
各大网站js逆向
proxiespool
完善后的代理池:爬取各大网站有效代理,定时更新代理,并维持代理池长度的动态平衡,同时储存到redis。通过flask开发网页api,方便调用
scrapy
全局下载并且请求传参糗事百科,异步下载桌面壁纸,东莞阳光网的全局下载(用正则来匹配链接),selenium模拟点击网易新闻进行新闻标题和内容的下载
strategy_quant
一个基于web端的实盘量化交易策略(市场有风险,投资需谨慎)
trade_quant
一个均线量化交易策略,并进行回测
verifycode
字母数字验证码的自动识别和滑块验证码的模拟滑动
zqtz's Repositories
zqtz/ecommerce
爬虫电商项目:用scrapy分布式爬虫框架爬取当当商品信息,用selenium模拟登录淘宝和京东收集商品信息
zqtz/trade_quant
一个均线量化交易策略,并进行回测
zqtz/strategy_quant
一个基于web端的实盘量化交易策略(市场有风险,投资需谨慎)
zqtz/app_spider
抓取豆果美食食谱数据,抓取抖音个人主页视频,通过mitmdump抓取个人粉丝数据,通过appium和多进程实现模拟滑动和多台设备的同时抓取
zqtz/finance
财务python化,效率再提高
zqtz/js_reverse
各大网站js逆向
zqtz/scrapy
全局下载并且请求传参糗事百科,异步下载桌面壁纸,东莞阳光网的全局下载(用正则来匹配链接),selenium模拟点击网易新闻进行新闻标题和内容的下载
zqtz/verifycode
字母数字验证码的自动识别和滑块验证码的模拟滑动
zqtz/databases
数据库学习笔记
zqtz/proxiespool
完善后的代理池:爬取各大网站有效代理,定时更新代理,并维持代理池长度的动态平衡,同时储存到redis。通过flask开发网页api,方便调用
zqtz/taobao
用接口请求淘宝商品数据
zqtz/yrspider
收集各大网站,app的系列数据
zqtz/yuanrenxue
参考网上解题思路,对猿人学爬虫比赛进行解题,方便个人使用