🍥 Bilibili 用户爬虫
知乎爬虫
豆瓣读书的爬虫
链家爬虫
python爬虫
微信公众号爬虫
新浪微博爬虫，用python爬取新浪微博数据
新浪微博爬虫（Scrapy、Redis）
抖音爬虫
爬虫
微信公众号文章的爬虫
**知网爬虫
🍙 Bilibili 视频爬虫
Python入门网络爬虫之精华版
👧 美女写真套图爬虫（二）
🚇暗网中文网监控爬虫(DEEPMIX)
python爬虫，包含大小项目
用scrapy写的京东爬虫
社交数据爬虫
Python爬虫系列
👩 美女写真套图爬虫（一）
美团app爬虫
全球最大成人网站PornHub爬虫 （Scrapy、MongoDB）
天眼查爬虫&企查查爬虫，指定关键字爬取公司信息
avmoo.com爬虫
📺 B 站全站视频信息爬虫
Python网络爬虫
爬虫轻型框架
汤不热 python 多线程爬虫
百度mp3全站爬虫
python爬虫练习
🔥 Shadowsocks 账号爬虫
requests+lxml爬虫，简单爬虫架构
基于搜狗微信搜索的微信公众号爬虫接口
淘宝天猫 商品 爬虫
Python爬虫，京东自动登录，在线抢购商品
简单易用的Python爬虫框架，QQ交流群：597510560
豆瓣电影爬虫
小红书笔记 | 评论爬虫、抖音视频 | 评论爬虫
爬虫合集
新浪微博爬虫，用python爬取新浪微博数据，并下载微博图片和微博视频
爬虫
一个超级轻量的百度图片爬虫
lots of spider (很多爬虫）
**知网爬虫
一些小爬虫 : )
python3 爬虫
链家网爬虫
QQ空间爬虫（日志、说说、个人信息）
Fofa爬虫
各种爬虫：爱企查爬虫，网上114企业信息爬虫，抖音视频爬虫，wipo爬虫， 专利信息爬虫（patentscope）
爬虫学习
Python脚本。模拟登录知乎， 爬虫，操作excel，微信公众号，远程开机
Github 仓库及用户分析爬虫
新浪微博爬虫(Sina weibo spider)，百度搜索结果 爬虫
秀人网爬虫 55156爬虫
大众点评店铺信息爬虫
拼多多爬虫，爬取所有商品、评论等信息
一个股票数据（沪深）爬虫和选股策略测试框架
python多线程爬虫爬取电影天堂资源
新浪微博的爬虫
豆瓣电影/豆瓣读书 Scarpy 爬虫
TVBoxOSC 服务端爬虫 Custom Server Spider for Tv Written in Python3
屎上最简单的DHT爬虫
基于Python3的pornhub网站爬虫
小红书笔记爬虫
scrapy专利爬虫（停止维护）
yande.re图片爬虫
知乎分布式爬虫（Scrapy、Redis）
B站用户爬虫 好耶~是爬虫
京东爬虫
python爬虫系列
小红书相关爬虫
入门爬虫项目. 详细注释!!!!!
お兄ちゃん大好き(琉璃神社爬虫脚本)
一个通用的可配置的爬虫框架
python 编写的DHT Crawler 网络爬虫，抓取磁力链接
知乎爬虫（验证码自动识别）
K站爬虫
小爬虫
xvideos视频爬虫
拉钩 | 豆瓣 | 链家爬虫项目的合集
闲鱼商品爬虫，xianyu
爬取电影天堂的电影爬虫
🐸 知网(CNKI)文献下载及文献速览爬虫
企查查爬虫
Python爬虫框架，内置微博、自如、豆瓣图书、拉勾网、拼多多等爬虫
Python爬虫和练习
抖音爬虫
爬取豆瓣小组帖子的爬虫。
Python爬虫爬取 Instagram 博主照片视频
基于 scrapy-redis 的通用分布式爬虫框架
电商爬虫系统：京东，当当，一号店，国美爬虫（代理使用）；论坛、新闻、豆瓣爬虫
知乎Live微信小程序 & asyncio爬虫
pornhub视频爬虫和pornhub视频下载url爬虫
实现多个爬虫共同工作的scrapy爬虫实例
Amazon商品引流的 python 爬虫
Python爬虫集合，内含各大网站爬虫，应有尽有，爬虫爱好者不容错过！！！
爬虫, http代理, 模拟登陆!
网易云音乐歌曲评论爬虫
美团（美食）店铺信息爬虫
大众点评商户数据爬虫
百度贴吧爬虫(基于scrapy和mysql)
煎蛋网图片爬虫
一个知乎爬虫，登陆，获取答案，图片
网易云音乐爬虫，数据可视化。
天猫双12爬虫，附商品数据。
短视频爬虫
**裁判文书网爬虫(2018-08-28更新)
🕷一些Scrapy爬虫的练手项目
《Python爬虫开发 从入门到实战》配套源代码。
京东爬虫，可抓取京东商品信息和评论
豆瓣小组爬虫
yande.re 爬虫一枚
python-爬虫-web-数据分析
微信公众号爬虫
🏫 高考爬虫
python爬虫实战练习手册
👍 京东爬虫（大量注释，对刚入门爬虫者极度友好）
一个简单的python爬虫，原生python+BeautifulSoup
爬虫
机票爬虫（去哪儿和携程网）。flight tickets multiple webspider.(scrapy + selenium + phantomjs + mongodb)
用Python写网络爬虫 学习总结和代码
大众点评爬虫（全站可爬，解决动态字体加密，非OCR）。持续更新
Python爬虫的学习历程
ofo共享单车爬虫
🕷️ 爬取拉勾网职位信息的爬虫！
淘宝爬虫SDK，用于淘宝开放平台或淘宝、天猫、阿里巴巴登录爬取
开源微信爬虫：爬取公众号所有 文章、阅读量、点赞量和评论内容。易部署。持续维护！！！
爬虫项目：链家网（普通/scrapy）、虎扑、维基百科、百度地图api、房天下（分布式爬虫）、微信公众号（代理池爬取）
百度百科爬虫
Python网络爬虫集合
基于搜狗微信的公众号文章爬虫
app爬虫
一个灵活、友好的爬虫框架
wechat spiders微信公众号爬虫
微信爬虫,微信采集
🙌Easily download all the videos from TikTok(amemv).下载指定的 抖音（Douyin） 号的视频,抖音爬虫
B站弹幕爬虫
🌈Python3网络爬虫实战：淘宝、京东、网易云、B站、12306、抖音、笔趣阁、漫画小说下载、音乐电影下载等
多线程知乎用户爬虫，基于python3
微博关键词搜索爬虫、微博爬虫、链家房产爬虫、新浪新闻爬虫、腾讯招聘爬虫、招投标爬虫
分享日常爬虫破解
基于scrapy的新闻爬虫
高清壁纸爬虫
基于scrapy的新闻爬虫
亚马逊评论爬虫
使用feapder爬虫框架开发的爬虫示例
推特爬虫
简易的爬虫工具
基于python实现的各种小爬虫
一个入门的爬虫作品。
淘宝爬虫原型，基于gevent
腾讯新闻、知乎话题、微博粉丝，Tumblr爬虫、斗鱼弹幕、妹子图爬虫、分布式设计等
Python 图片爬虫
Python 图片爬虫
微信好友爬虫，图片处理
爬虫project
scrapy分布式爬虫，selenium 爬虫，手机群控（自动化）（appium,airtest,uiautomator2），反爬破解文档
网易云爬虫解决方案
哈工大各种爬虫。
爬虫
爬虫解包 Android ROM
LSpider 一个为被动扫描器定制的前端爬虫
超高速异步协程Python爬虫
基于python的1024爬虫，可爬下1024的文章和图片放到当前目录上。
清华教参平台爬虫
利用爬虫科学上网
Python爬虫
领英的爬虫-linked-scrapy
微信公众号的爬虫项目
Python写的对javbus的爬虫
某福利app爬虫
天眼查爬虫
基于Scrapy的Python3分布式淘宝爬虫
TiktokCrawler抖音爬虫（无水印）,多线程爬虫+JS逆向
一个爬取企查查网站中所有**企业与公司基本信息的爬虫程序。
超高速异步协程Python爬虫
基于python的1024爬虫，可爬下1024的文章和图片放到当前目录上。
清华教参平台爬虫
利用爬虫科学上网
Python爬虫
领英的爬虫-linked-scrapy
Python写的对javbus的爬虫
某福利app爬虫
微信公众号的爬虫项目
天眼查爬虫
煎蛋网爬虫
虎扑步行街爬虫
宜搜数十万小说爬虫
七麦APP数据爬虫
极简爬虫工作流
基于Scrapy的Pixiv热榜爬虫
一只百度文库的爬虫 A spider of baiduwenku
扫描“微信读书”已购图书并下载本地PDF的爬虫
爬虫系列 Scrap爬虫框架 百度云盘爬虫(网盘)
weixin.sogou.com 微信爬虫 -- 基于scrapy
爬虫知识梳理 某宝爬虫 某运营商爬虫 某行征信爬虫 在线爬虫设计 密码控件爬虫 离线爬虫设计
汽车之家爬虫，解决字体反爬。
91Porn 爬虫~
基于爬虫的web漏洞扫描器
招聘岗位信息聚合系统，拥有爬虫爬取、数据分析、可视化、互动等功能
新闻爬虫，爬取新浪、搜狐、新华网即时财经新闻。
🚀🚀🚀feapder is an easy to use, powerful crawler framework | feapder是一款上手简单，功能强大的Python爬虫框架。内置AirSpider、Spider、TaskSpider、BatchSpider四种爬虫解决…
🕷️招聘网站爬虫合集，不定期更新分支
python scrapy 企业级分布式爬虫开发架构模板
雪球网沪深全站股票评论爬虫
gzhihu是一个从知乎上爬取内容的爬虫
Python爬虫和Flask实现小说网站
⭐ 图虫网爬虫
微博爬虫，一个基于Scrapy框架的轻量微博爬虫，Sina Weibo Spider
爬虫
百度百科爬虫
知道创宇爬虫题目 持续更新版本
直接通过链家 API 抓取数据的极速爬虫，宇宙最快~~ 🚀
淘宝爬虫项目
爬取专利信息的爬虫
知乎网爬虫
知乎爬虫系列
pixiv图片爬虫保存
👏 Python爬虫实现百度图片自动下载
网络爬虫之最基本的爬虫：爬取网易新闻排行榜
知识星球爬虫
Python从零开始，一点一滴学习爬虫。
优酷爬虫-下载优酷视频
360/0Kee-Team/crawlergo动态爬虫结合长亭XRAY扫描器的被动扫描功能
大众点评商家评论爬虫
Python 网络爬虫实例
1688 scrapy爬虫
Linkedin爬虫，根据公司名字抓取员工的linkedin信息
土巴兔和谷居装修网站爬虫
自制BILIBILI弹幕爬取，签到，抢楼等爬虫。。
Telegram download media | Telegram 下载群聊天的文件以及视频等内容。｜ Telegram 爬虫 ｜ tg 爬虫
股票数据爬虫+分析+可视化框架
网站图片爬虫(已包含：微博，微信公众号，花瓣网)及免费IP代理 豆瓣电影爬虫
知乎所有用户爬虫
Android应用市场网络爬虫
免费 IP 代理池。Scrapy 爬虫框架插件
同花顺股票信息爬虫
汽车之家爬虫
使用Pyspider框架的豆瓣爬虫
汽车之家车型图片爬虫
百度贴吧爬虫,微博
百度文库爬虫 Baidu Wenku Spider 百度文库下载器
jobSpider是一只scrapy爬虫，用于爬取职位信息
裁判文书网爬虫demo，2020-04-23更新
python爬虫
一些爬虫的项目
起点小说网全站爬虫
python 爬虫(amazon, confluence ...)
新浪微博相册大图多线程爬虫。
ASoul评论区小作文 枝网查重系统 爬虫部分
python爬虫学习经历
一个简单的小红书爬虫实现
裁判文书网爬虫
🍿爬虫代理IP池(proxy pool) python🍟一个还ok的IP代理池
豆瓣电影（短评）爬虫
自动发车爬虫
一个用于scrapy爬虫的自动代理中间件
Tinepeas，我们自己的爬虫框架。
共享单车地图爬虫
爬虫管理平台
基于Python3的动态网站爬虫，使用selenium+phantomjs实现爬取动态网站, 本项目以爬取今日头条为例
分布式垂直爬虫框架 & 爬虫们
JAVBus 老司机爬虫
scrapy-monitor，实现爬虫可视化，监控实时状态
🕷python3爬虫
LeetCode Python爬虫，爬取题目以及提交代码
简单、实用的爬虫工具，仅需四步创建属于你的爬虫程序！
基于gevent的mini-scrapy爬虫框架
巨潮资讯网爬虫爬取PDF & PDF解析关键字统计
网易云音乐爬虫
分享一些爬虫脚本
简易验证码爬虫框架
分布式新浪微博爬虫
美团外卖爬虫
一个python爬虫来爬取洛谷各种信息
个人探索爬虫
苏宁爬虫
百度网盘爬虫2017
百度迁徙数据爬虫
新浪微博搜索爬虫
慕课网 Python开发简单爬虫 示例代码
知乎问题及答案爬虫
python 爬虫，下载一些vip音乐（网易云、酷狗、ＱＱ音乐）
暗网监控爬虫
Python爬虫之多进程
AlipaySpider on Scrapy(use chrome driver); 支付宝爬虫(基于Scrapy)
Python3编写的各种大小程序，包含从零学Python系列、12306抢票、省市区地址库以及系列网站爬虫等学习源码
lofter的爬虫，爬所有点过的喜欢/推荐/tag、爬取个人主页和单篇爬取。
使用scrapy编写的python爬虫
拼多多爬虫，抓取拼多多热销商品信息和评论
一些爬虫
2019 补天厂商爬虫与数据可视化文件打包
清华大学网络学堂爬虫 Tsinghua Web Learning (deprecated)
一个爬虫式的网段Web主机发现小工具 # A HTTP Service detector with a crawler from IP/CIDR
基于Python+Flask+Echarts的疫情爬虫&数据可视化项目
一个爬虫式的网段Web主机发现小工具 # A HTTP Service detector with a crawler from IP/CIDR
py3爬虫项目
爬虫项目+简单数据分析
基于Python+scrapy+redis的分布式爬虫实现框架
爬虫实例：微博、b站、csdn、淘宝、今日头条、知乎、豆瓣、知乎APP、大众点评
稳定工作4年的微信公众号爬虫 Based on python and vuejs 微信公众号采集 Python爬虫 公众号采集 公众号爬虫 公众号备份
电影天堂全站电影爬虫
QQ空间爬虫，一小时20万数据
一些爬虫项目
AliExpress爬虫学习
【图文详解】scrapy爬虫与动态页面——爬取拉勾网职位信息（1）
Python多线程爬虫
Discuz论坛爬虫
动态IP解决新浪的反爬虫机制，快速抓取内容。
淘宝商品信息爬虫
基于Scrapy的外卖平台商家信息爬虫
飞机票爬虫
👮 美女写真图爬虫 gevent 版
这是一个用Python写的小说爬虫软件
搜狗词库爬虫，全类目下载，自动分类，scel转txt
QUANTAXIS 爬虫mod python/javascript/mongodb
百度图片小爬虫
小红书微信小程序爬虫
自己学习爬虫有关的经验总结和在网上看到的一些好的爬虫例子
爬虫，web框架
这是一个作者毕业设计的爬虫，爬取58同城、赶集网、链家、安居客、我爱我家网站的房价交易数据。
东方财富网股吧爬虫
B站视频信息爬虫
武汉2019nCov信息爬虫
抓取weibo图片爬虫
微信爬虫
python spider python 图片 爬虫
深圳房产备案价格爬虫
百度云爬虫-爬取百度云/百度网盘所有的分享文件
通用新闻类网站分布式爬虫
虎扑步行街爬虫
QQ空间爬虫，可导出并显示日志、相册、留言板、说说、照片、视频等数据。
网页解析器，用于网络爬虫解析页面, 不懂网页解析也能写爬虫
Python3京东爬虫，扫码登录、查价、加购、下单
EroCool 漫画图集网站爬虫
日常爬虫
高考志愿，统计大学爬虫
基于Python3的Scrapy网页爬虫框架
爬虫豆瓣读书评分9分以上榜单
B站-爬虫-爬动漫脚本
python实现的多线程爬虫
一个用BeautifulSoup写的简单的爬取百度搜索结果的爬虫
爬虫的各种坑 我来填 :)
豆瓣爬虫租房
豆瓣电影、书籍、小组、相册、东西等爬虫集 writen by Python
知乎《手把手教你写爬虫》专栏文章备份和相关文件
贴吧爬虫
58同城 (全国) 房屋信息爬虫
Python爬虫和Python数据分析小项目(Some Python crawlers and data analysis projects)
链家二手房爬虫
个人爬虫集合
实现数据存储到数据库的爬虫实例
爬虫生成微信api
爬虫的相关笔记和代码
fetchman is a simple crawler system/简单好用的爬虫框架
爬虫练习
python爬虫相关
自如爬虫，定期爬取需要的房源信息
链家网的一个爬虫项目
爬虫+脸部识别+DCGAN脸部自动生成
知网论文数据爬虫
从简单爬虫到爬虫框架的demo记录
爬取csdn博客的爬虫
网络爬虫和数据分析，当当、豆瓣、知乎、猫眼、微信公众号、联想官网、今日头条爬虫
百度知道的爬虫
BOSS直聘网爬虫
百度网盘爬虫一天7W 条数据，求star
Python爬虫实例
python爬虫学习
《精通scrapy网络爬虫》中代码
微信指数爬虫
rabbitmq的scrapy分布式爬虫
[停止更新]网易云音乐爬虫系列，现在更新了爬取评论方面
通过uiautomator2实现的爬虫
记录一些爬虫过程中常用的代码
饿了么商家信息爬虫
淘宝优惠券爬虫
一些爬虫相关的签名、验证码破解，目前已涉及：小红书。
Python3.5爬虫
《python3网络爬虫开发实战》
Internet Resource Crawler / 互联网资源爬虫
国电集团电子招投标平台爬虫数据
🐛 国家节假日解析爬虫
jaclibrary评分最高影片磁力链爬虫
爬虫脚本
🙉 美女写真图爬虫 asyncio 版
scrapy爬虫框架模板，将数据保存到Mysql数据库或者文件中。
自写爬虫爬取知乎问题及回答
淘宝App和小红书App爬虫，获取x-sign
上海垃圾分类数据爬虫
一个磁力链接的爬虫。
facebook爬虫
淘宝天猫爬虫
京东爬虫 和 评论清洗及指标提取
deepdao数据爬虫+入库
爬取妹子图（python）：爬虫（bs+rq）+ gevent多线程
91pron爬虫
淘宝爬虫命令行版，指定爬取淘宝商品和评论，利用selenium爬取商品信息，requests爬取评论信息。
法律文书网爬虫
用于存放一些爬虫脚本
动漫之家漫画站电脑版原图爬虫
淘宝关键词爬虫
豆瓣Top250电影图书爬虫
将自动爬虫的结果判断是否属于hooks，并不断抓取url爬啊爬。
爬Bing每日壁纸的爬虫
千图网图片全站爬虫
方便扩展的新浪微博爬虫
企查查爬虫
Boss直聘岗位数据爬虫分析可视化
qq说说爬虫+简单的数据分析
A crawler for submissions on leetcode-cn. 这是一个用来爬取力扣**(LeetCode CN)提交代码的爬虫。
各种爬虫---大众点评，amazon,安居客，58，1688，养老网，人人贷，和讯网股票，豆瓣，无讼案例，爱回收...
A crawler for submissions on leetcode-cn. 这是一个用来爬取力扣**(LeetCode CN)提交代码的爬虫。
分布式Github爬虫
第一次写爬虫，爬课程格子的校花榜，比较简陋，没用多线程。
京东商品评论爬虫
使用pyspider爬虫框架爬取工控相关数据(漏洞、预警、安全事件等)
Dynamic file detection tool based on crawler 基于爬虫的动态敏感文件探测工具
爬妹子网的小爬虫1.0
SCRAPY爬虫实验，主要是一些简单的栗子，让你快速了解scrapy玩法！
bayonet是一款src资产管理系统，从子域名、端口服务、漏洞、爬虫等一体化的资产管理系统
停止维护，支付宝免签约收款爬虫端
爬取汽车之家的口碑数据，并破解前端js反爬虫措施分析
爬虫
爬虫 提取磁力链接
网易BUFF爬虫
足球彩票爬虫,django数据展示
91porn批量视频、图片下载 ;新手爬虫;novice spider ;多线程
📹 B 站异步爬虫初体验
python分布式爬虫打造搜索引擎课程的资源
一个基于Scrapy的数据采集爬虫代码库
scratch2和scratch3素材库爬虫和处理工具
scratch2和scratch3素材库爬虫和处理工具
一个全网爬的多线程爬虫
数据分析案例(爬虫+分析)
zol 手机壁纸爬虫（简单分布式？）
安卓模拟器闲鱼爬虫
python爬虫的练习
哔哩哔哩弹幕网数据爬虫
国家统计用区划代码和城乡划分代码---爬虫及数据
下载指定的 火山小视频（hotsoon） 用户下的视频,火山爬虫,火山小视频爬虫
手写爬虫实例
基金爬虫，爬取天天基金的基金信息与基金经理信息
V2EX爬虫
【福利爬虫】 爬虫，把所有图片爬下来并存在电脑上
谷歌图片通用爬虫
python爬虫学习笔记
机票爬虫
饿了么商家数据爬虫
亚马逊爬虫
网络爬虫之Selenium使用代理登陆：爬取去哪儿网站
对Bangumi.tv进行爬虫
抖音 SDK，数据采集，爬虫抓取不是梦
对Bangumi.tv进行爬虫
Scrapy 新浪新闻爬虫
网络爬虫工具，Geetest 验证码破解，喜欢就给个星星吧~
爬取网易客户端内容的小爬虫
多线程美团酒店爬虫，python模拟美团_token
Pornhub网站爬虫
爬虫
天猫旗舰店爬虫
爬虫抓取CCTV电视节目单，生成EPG节目单
爬取智联招聘网数据，并对其进行招聘数据可视化，爬虫，Data visualization，Django2，echarts
recruit 招聘爬虫+数据分析
python3写的一些爬虫
A crawler for accommodation rental information in Douban Group 豆瓣小组上海租房爬虫
pdd (拼多多) 爬虫 js 解密 anti_content 参数解密及全站抓取代码思路实现
百度爬虫：热词，词频，音乐，poi信息
一款将xray和fofa完美结合的自动化工具,调用fofaAPI进行查询扫描,新增爬虫爬取扫描(懒人必备)
百度图片爬虫, 爬取百度图片 ,scrapy，百度图片爬取
淘宝1688采购批发网站爬虫
使用asyncio和aiohttp开发的轻量级异步协程web爬虫框架
个人python爬虫的学习和实践记录
知网爬虫cnkispider，输入关键字爬取知网检索数据
高校教师信息爬虫
Javbus番号爬虫，爬取所有番号作品以及磁力链
百度迁徙爬虫
91爬虫。
帮助爬虫通过点选验证及滑动验证, 验证码识别
一个基于scrapy-redis的分布式爬虫模板
爬虫实战：python3.6 + scrapy + mysql爬取 脚本之家
极客时间爬虫
极客时间爬虫
美团爬虫，基于scrapy_redis
高考志愿系统数据获取爬虫code
Scrapy 新浪微博搜索爬虫
基于Redis实现的简单到爆的分布式爬虫
超星(学习通)题库爬虫，通过自测爬取题库。
我的爬虫合集
小红书 x-s逆向，小红书爬虫
Python实现的LeetCode爬虫。爬取LeetCode题目描述和提交的代码。
拉勾职位信息爬虫
基于深度学习的p站高质量涩图AI爬虫，可以学会你的XP
该项目通过scrapy爬虫从巨潮网络的服务器获取**股市的公告
成都房协预售楼盘爬虫
韦玮老师的《精通Python网络爬虫》配套代码
智能文章解析爬虫
爱奇艺视频信息的爬虫
基于python+appium的android微信自动添加好友及爬取其朋友圈的爬虫
一个工业和信息化部ICP备案查询的爬虫
坚持写100个爬虫
分布式爬虫系统
Python爬虫代码
豆瓣爬虫|知乎爬虫|马蜂窝|猫途鹰|推特等相关爬虫
草榴网站爬虫
94imm爬虫修复版，新增自动下载视频脚本
爬虫笔记
爬虫： 爬取百度学术
电商平台商品自定义爬虫脚本(已完成淘宝,京东)
百度搜索爬虫，爬取百度搜索结果
高并发爬虫框架 + 爬虫监控
爬虫，爬取知识星球网页版
📦 原创开发的 爬虫实用工具 【特定代理池】【特定cookies池】【注册辅助工具】
Scrapy框架下的pixiv多功能爬虫
爬虫的Demo--按照不同模块上传
A simple crawler about CNKI.一个简单的CNKI爬虫
Python 工作空间，包括写的脚本、爬虫、leetcode 等
增强版Python+wordpress爬虫
Python3 DHT 磁力种子爬虫 种子解析 种子搜索 演示地址
微博爬虫。通过调用weibo api，而非暴力爬取的方式获取信息。
基于aiohttp的infoq技术资讯网站爬虫
微博轻量级爬虫-2019可用-可扩展
🐢 “宜出行”热力图数据爬虫 A crawler for Tencent EasyGo
自己写过的爬虫脚本
🚗🚗1024社区单线程图片爬虫
使用aiohttp+asyncio简易的上海链家租房爬虫
bing、google、baidu搜索引擎爬虫。python3.6 and scrapy
各种爬虫资料
微信公众号爬虫
一个获取知乎用户主页信息的多线程Python爬虫程序。
**主流在线电影网站爬虫及搜索web代码
网络爬虫
抖音爬虫，2020/04/22可用（ 复活版），欢迎star和打赏
基金爬虫与数据分析
一个简单的分布式爬虫框架
网易严选爬虫
图片爬虫
[Deprecated]微信公众号爬虫，专爬文章，爬取＋一键转载示例
微信文章爬虫，加入代理池中间件
python实现的数据爬虫和数据接口
这是一个专门记载python爬虫的存储库
基于Appium的美团爬虫
基于 Python3 的小爬虫。
Scrapy分布式、去重增量爬虫
基于关键词搜索结果的微博爬虫
爬虫相关
58企业名录爬虫
👍 苏宁爬虫（大量注释，对刚入门爬虫者极度友好）
爬虫练习
足彩爬虫与数据分析
学习爬虫的练习，嗯从爬美女图片开始。
小红书小程序版本爬虫
使用爬虫爬取全国学校数据
水木股票爬虫
搜狗微信公众号文章爬虫
根据东财股吧爬虫数据进行自然语言分析，展示股市热度
马蜂窝分布式爬虫，用来获取目的地和景点信息
Python + MongoDB 开发的百度云资源爬虫
简单爬虫爬出百度搜索结果页面
bilibili视频信息爬虫
知乎用户公开个人信息爬虫, 能够爬取用户关注关系，基于Python、使用代理、多线程
Python + MongoDB 开发的百度云资源爬虫
Python 写的一些小案例，涉及爬虫、可视化方面，希望对Python初学者有所帮助
一个将runoob.com转换为PDF的爬虫
requests升级版requests-html 爬虫编写及通用爬虫模块搭建
Freebuf.com : 简化版线程池爬虫。a threadpool scraper from freebuf
🎉一个用PYQT5写的图形化的多功能电商爬虫小工具
Freebuf.com : 简化版线程池爬虫。a threadpool scraper from freebuf
抖音用户分享页数据爬虫
🚀 使用PyQt5图形界面的Python多线程nhentai爬虫
B站弹幕、评论爬虫+词云生成
淘宝爬虫（口红）
python百度文库爬虫
淘宝拍照找同款数据爬虫
【爬虫】基于Scrapy开发的微博（评论、转发、点赞）爬虫，可以批量抓取。
抖音相关爬虫
图书馆座位自动预约(Python爬虫)
淘宝爬虫
多线程爬虫Get豆瓣电影、演员、书籍、作者信息
淘宝爬虫
【图文详解】python爬虫实战——5分钟做个图片自动下载器
国内外主流搜索引擎爬虫
🌈 一只叫做Python的小小爬虫～
工信部新能源汽车数据爬虫
scrapy抓取数据存储至本地mysql数据库-大众点评爬虫
爬取网易云音乐评论
Selenium×Firefox自动化爬虫模板
Boss直聘爬虫
微博爬虫及舆情分析系统
Scrapy爬虫实战系列，从零开始爬取腾讯百度淘宝知乎各大网站内容
easy crawl web resource , extract web infomation/简单的爬虫框架
猫头鹰搜索引擎，爬虫，分词，索引，搜索
国家企业信用信息官网爬虫，未获取全部企业信息，重点在设计反爬思路
疫情数据爬虫，2019新型冠状病毒数据仓库，轨迹数据，同乘数据，报道
**银行外汇牌价爬虫 / API (Bank of China - Foreign Exchange - Spider/ API)
Python3网络爬虫实战练习
Python 网络爬虫（Web Crawlers）学习笔记。
**大学MOOC爬虫，网易云课堂（study163）爬虫，课程视频、文档下载
appium和mitmproxy在爬虫中的使用(以爬取抖音视频为例)
历史上的今天-爬虫
简单的Instagram爬虫，主要采用Pyhton书写。
超星尔雅爬虫，通过courseId，爬取完整的题目。 - python实践
爬虫：一个爬取QQ Bugly数据的爬虫，用于产生报表，使用selenium实现。
web敏感目录、信息泄漏批量扫描脚本，结合爬虫、目录深度遍历。
基于scrapy的链家房源爬虫，通过小区信息爬取所有房源。
Python爬虫-视频下载
使用python 3实现的一个知乎内容的爬虫，依赖requests、BeautifulSoup4。
基于Python的天眼查爬虫，爬取完整的公司数据（可爬需要VIP才能用的邮箱和电话等）
京东，淘宝，苏宁，亚马逊爬虫抓取商品信息并分析数据
qq空间爬虫生成好友关系网
爬虫学习笔记
微信公众号爬虫，公众号历史文章，文章评论，文章阅读及在看数据
徒手造轮子系列：百度文库爬虫，爬取文档的文字内容
selenium裁判文书网爬虫，文书网登录
知乎用户爬虫数据分析
简单的python爬虫爬取图片【注意身体】
一个简单的P站高清大图小爬虫。
用于学习爬虫
有道词典网页爬虫
爬虫
一个谷歌高清图片爬虫
用python写的爬虫，用来镜像一个网站到本地
基金历史净值爬虫(单位净值、累计净值)
一个谷歌高清图片爬虫
豆瓣爬虫
Python3网络爬虫实战入门篇及各种中小型爬虫项目集合~
QQ 爬 虫 ,抓取一个QQ号的所有群信息
学习爬虫
基于scrapy,scrapy-redis实现的一个分布式网络爬虫,爬取了新浪房产的楼盘信息及户型图片,实现了常用的爬虫功能需求.
新一代fofa爬虫工具
专利爬虫，基于request模块的爬虫，保存格式为csv
一个简单的python爬虫实践，爬取包含关键词的新浪微博
轻量级爬虫实践代码
今日头条爬虫
轻量级爬虫实践代码
微博爬虫：输入对应的爬取账号ID，爬取微博内容/时间/微博名/转发数/点赞数/评论数
中医组方之爬虫
新浪微博爬虫：登录、关键词微博查询、微博监控
基于Scrapy框架的豆瓣电影爬虫
预约美帝签证各个签证处最早时间的爬虫
📚Scrapy：网站爬虫框架库
Pixiv爬虫 爬取每日排行榜
DHT磁力资源爬虫程序，具备更低的资源占用和更高效的爬取效率
淘宝爬虫抓取手机关键字A scrapy fo catch taobao items
python django 美女图片爬虫站
Scrapy+Selenium+Django政府网站爬虫
一个还算通用的爬虫脚本，可自己设定爬取的深度，可以把动态页面和外链单独分出来~
瓜子二手车爬虫
快手主播爬虫
爬取大众点评的店铺评论的爬虫
一个简单的 Python 爬虫系统示例
京东商品爬虫
一小时爬虫系列，关于<宅男福利>的爬虫，目测下载15万张图片
一个简单的 Python 爬虫系统示例
一小时爬虫系列，关于<宅男福利>的爬虫，目测下载15万张图片
爬虫，获取NVD/CNVD/CNNVD数据
👍 天猫爬虫（大量注释，readme有思路分析）
facebook，微博，twitter，youtube，优酷 信息爬虫
**新闻网爬虫（全站增量爬虫，可用时间至2019.7）
Python图片爬虫服务.
观云网盘搜索服务爬虫，基于Scrapy
基于HTML爬虫的豆瓣小组API(Python版本)
学习爬虫的经验总结
学习爬虫的经验总结
长行的爬虫集合：微博、Twitter、玩加、知网、虎牙、斗鱼、B站、WeGame、猫眼、豆瓣、安居客、居理新房
一个通用的Cnki爬虫工具
天眼查 Python爬虫
2017**软件杯——安全可靠赛题2:分布式爬虫系统
这是一个python爬虫的若干个练习小demo
**知网专利爬虫
基于scrapy的网易云音乐爬虫，爬取用户关系
一个定向爬取电子书网站的爬虫库
爬虫根据博主名爬取下载ins上的图片和视频
极光验证码,为反爬虫而生
百度百科爬虫
裁判文书 破解 爬虫
实现爬取imdb.cn所有影视资料的scrapy爬虫
爬虫对于动态网页的处理方式
京东数据爬虫接口【另，顺便找工作，请联系我】
UPR 教务系统信息收集工具（爬虫）
Python3网络爬虫
pornhub爬虫
知网爬虫，专利、论文项目。仅供学习交流，严禁盈利
知网爬虫，专利、论文项目。仅供学习交流，严禁盈利
淘宝网淘女郎爬虫
什么值得买 Python 爬虫项目
10 photo website spiders, 10 个国外图库的 scrapy 爬虫代码
一些爬虫脚本
pornhub爬虫
selenium企查查爬虫
利用爬虫技术爬取yande.re上的图片
抖音爬虫，输入指定用户的抖音id，即可下载TA的所有视频作品
网页爬虫实践示例
小红书app爬虫实现
Python爬虫，京东自动登录，指定商品自动加购物车，自动下单，指定时间抢购商品 (QQ交流群：348885782)
使用 Scrapy 写成的 JK 爬虫，图片源自哔哩哔哩、Tumblr、Instagram，以及微博、Twitter
北航博雅课程Python爬虫接口
Python爬虫实战 - 模拟登陆各大网站 包含但不限于：滑块验证、拼多多、美团、百度、bilibili、大众点评、淘宝，如果喜欢请start ❤️
apple_python 官网自动监控爬虫
Python 关于期货数据 爬虫
天涯文字小爬虫
漏洞库、产品库爬虫
微信指数，百度指数爬虫
**裁判文书网爬虫（已过期）
PC淘宝商品评论爬虫程序A scrapy for catch taobao item comment using python3
python爬虫模拟知乎登录
最右APP爬虫，用Python爬取最右APP段子数据和视频弹幕。
基于Scrapy+Redis的分布式爬虫
无cookie版微博爬虫，可以连续爬取一个或多个新浪微博用户信息、用户微博及其微博评论转发。
爬虫代理池
《精通 Scrapy 网络爬虫》刘硕 书中源代码
种子（磁力链接）搜索爬虫，爬取btbook
网贷之家数据爬虫
一个获取网易云音乐歌手、专辑、歌曲、评论、歌词等数据的Python爬虫
基于asyncio与aiohttp的异步爬虫
各种爬虫脚本。tumblr，91porn，1024，mm131等等，更新中
基于python3.6的微博爬虫（scrapy）
漫画堆爬虫
微信公众号爬虫
百度图片爬虫，可以爬取原图
⭐ 美之图APP爬虫
🐒 用于下载**大学慕课的课程视频及文档的爬虫程序
爬虫界小菜鸡的学习之路
Python 爬虫基金
各种爬虫
FOFA批量脚本，有爬虫和api两种版本
爬虫的ip代理池
用Selenium+Firefox实现的爬取自己QQ空间说说的爬虫。
石墨文档爬虫
今日头条爬虫，主要爬取关键词搜索结果，包含编辑距离算法、奇异值分解、k-means聚类。
🍥 CSDN 爬虫，批量爬取指定用户全部博文并输出为 markdown 格式
豆瓣读书爬虫
爬取mebook书籍百度网盘地址的爬虫
用于抓取贴吧发帖中的手机号和电子邮箱的一个爬虫
国家统计局爬虫
天天基金网爬虫：北向资金、基金每日净值涨跌、大盘涨跌、基金公司信息
毫末科技的爬虫
某东商品价格监控：自定义商品价格，降价邮件/微信提醒。技术：Python爬虫/IP代理池/JS接口爬取/Selenium页面爬取
由Python编写的全异步实现的动漫之家(dmzj)漫画批量下载器（爬虫）
Python 爬虫
知乎收藏夹爬虫实现
微博的爬虫，爬个人主页，用的scrapy 框架
python编写的爬虫代理ip池
微博热榜爬虫
仿造scrapy制作轻量级爬虫框架，旨在提升编程能力
sobaidupan.com 的百度网盘爬虫
爬虫-爬小说网站数据-python
scrapy阿里巴巴供货商公司爬虫
租房爬虫
北京地铁客流量统计（py爬虫+js统计图）
mooc爬虫，爬视频，字幕，pdf
私募排排网爬虫
爬虫：爬取豆果网和美食网的菜单
斗鱼爬虫，获取直播间真实人数信息
用scrapy爬虫框架爬取百度搜索风云榜实时热点
个人练习的爬虫项目集合
价格追踪爬虫
百度百科网络爬虫，爬取python词条相关页面的标题和简介。
✨ 本仓库用于存储一些小程序。比如，知乎爬虫、股票爬虫、中文文本情感分类等
NextB的Telegram爬虫项目，爬取指定群组的聊天记录
SSE 50 index options crawler 上证50期权数据爬虫
天眼查爬虫
天眼查爬虫
淘宝爬虫/天猫超时爬虫/淘宝类目属性爬虫
微信公众号爬虫，可抓取文章与评论
简书爬虫
🔧 🔩 🔨 收集整理了爬虫相关的工具、模拟登陆技术、代理IP、scrapy模板代码等内容。
根据老师或车牌去javbus抓取磁力地址的爬虫脚本～
爬取裁判文书网法律案例文档内容【分布式爬虫】
智联招聘关键词搜索职位信息爬虫
用Python实现的网络爬虫示例
链家二手房爬虫
B站视频信息爬虫
日常代码爬虫、gui小工具等
东方财富股吧爬虫
🌀 crawl bilibili user info and video info for data analysis | BiliBili爬虫
基于微博数据的舆情分析项目，包括微博爬虫、LDA主题分析和情感分析。
爬虫的一些小项目,。欢迎star。
推特爬虫
基金爬虫
爬虫-知网
Python爬虫项目
一个B站排行榜的爬虫Py程序
历年新闻联播的爬虫
**知网文献爬虫
微博相册妹子爬虫
paper information spider; 论文信息爬虫
豆瓣爬虫
coding公有仓库爬虫
网络爬虫集合
网络爬虫，爬取企业信用信息
今日头条美女爬虫
code for《Python3网络爬虫开发实战》
卷积神经网络&&爬虫 实现网易新闻自动爬取并分类
时光网电影数据和海报爬虫
B站3亿用户信息爬虫（mid号，昵称，性别，关注，粉丝，等级）
**知网爬虫
整理后的爬虫，scrapy + db + kafka + redis
快手播放量爬虫
新闻网站爬虫,目前能够爬取网易，新浪，qq，搜狐等三家网站的新闻页面，并保存到本地。
使用Scrapy爬虫框架爬取网页图片并保存本地
使用Scrapy爬虫框架爬取网页图片并保存本地
🚚一只爬取mzitu.com美女图片的小爬虫，不说了赶紧上车～
微信公众号爬虫
python+Selenium爬虫：模拟登录+自动点击
《Python3 网络爬虫宝典》随书配套代码
入门级爬虫，爬取百度百科词条和简介
iHealth 项目的内容爬虫（一个基于 python 和 MongoDB 的医疗咨询爬虫）
初学者 python爬虫带窗口版
微信公众号文章爬虫
基于Python爬虫的欢太商城自动任务脚本
淘宝、京东、拼多多商品店铺基础信息爬虫 Selenium+Python技术栈
🍁使用python制作的用于爬取妹子图官网的爬虫程序
基于爬虫批量爬取网页美团、单视频抖音评论
小红书用户笔记数据爬虫（仅学习使用）
淘宝商品详情+评论爬虫+天猫工商执照（Scrapy、Redis）
基于Scrapy框架的网易云音乐及评论爬虫
python爬虫爬取微信聊天记录并更新到印象笔记evernote
利用Python编写爬虫程序，并利用PyQt5制作UI界面，让爬虫程序能傻瓜式操作。
新闻抓取爬虫
妹子图片爬虫下载，注意身体营养，常备营养快线！！！
微博用户关系爬虫
Scrapy 搜狗词库爬虫
Python 网络爬虫 爬西瓜视频
基于selenium的轻量级新浪微博爬虫
"Python爬虫项目"
一些小的爬虫程序
mm131图片爬虫
爬虫，爬取皮皮虾、糗事百科、百思不得姐站点的内容
新闻爬虫 (腾讯,网易,新浪,今日头条,搜狐,凤凰网,腾讯滚动新闻)
xpath爬虫例子
【大四下】AV女优/小电影爬虫
淘宝爬虫，可以获取商品名称、价格、位置、销量、好评中评差评
python 小小爬虫
iwara本地化，包括爬虫和本地局域网前后端
新浪热门微博爬虫，外加词云分析。
利用Python3.3.5 开发的百度新闻的爬虫
自制Python玩具小爬虫，用来爬取失信被执行人、专利等数据
基于scrapy框架的新闻爬虫
Google Extension WebStore 爬虫，crx文件下载和内容解析 By Nearg1e
抖音爬虫
中药方剂爬虫
代理地址爬虫
1024爬虫小说下载
Python爬虫，爬取Instagram一个用户主页所有的图片和视频
爬虫demo, 爬取小红书无水印图片等
BaiduSpider，一个爬取百度搜索结果的爬虫
python学习小爬虫
微信公众号爬虫，根据指定公众号名称，爬取该公众号所有文章。
新闻爬虫
美团外卖商家版爬虫
爬虫反爬集合（盒马）
基于scrapy+splash的网站爬虫
Python爬虫+Everything按女优名称整理本地AV资源（需要富强上网）
爬虫获取v2ray节点
微信小程序爬虫，爬取商品列表。支持写入数据库。
基于asyncio与aiohttp的异步协程爬虫框架 欢迎Star
抖音爬虫
天猫店铺爬虫，爬取店铺所有商品数据
爬虫 for 百度图片 and Pixivic
基于Scrapy的QQ音乐爬虫(QQ Music Spider)
一个用来爬取拉勾网招聘数据的爬虫
为小台鬼写的爬虫，爬**POI-GPS数据，**电信防403BAN
拉勾网爬虫
网络爬虫模拟登陆bilibili 滑动验证码的破解 弹幕发送 2018-10-9
模拟拉勾app系列---数据准备爬虫
微信公众号爬虫
用scrapy编写的一个可以爬取智联招聘全部职位信息的爬虫
【工具】基于selenium的微博搜索爬虫
aqi天气信息爬虫、清洗-scrapy+scrapy-redis+selenium+pandas+matplotlib
知网、搜狗微信、搜狗新闻的爬虫
Python网络爬虫项目代码仓库
存储自己平时练习编写的爬虫spider
與情分析系统，包括爬虫、数据清洗、文本摘要、主题分类、情感倾向性识别以及分析结果数据可视化
python爬虫集合
python爬虫集合
新浪爬虫(新浪微博爬虫，新浪微博评论，新浪每日持续更新新闻，新浪新闻爬虫)
本子爬虫
fofa爬虫，支持高级查询语句批量获取域名和ip
【爬虫】2019淘宝新反爬解决Demo，selenium无法登陆解决方案
小说爬虫
scrapy框架写的爬虫
去哪儿机票、酒店信息、评论爬虫
豆瓣Top250影评爬虫（用于情感分析语料）
基于Scrapy开发的网络爬虫，用于爬取大众点评，链家和搜房的数据
爬虫。考研调剂信息
python爬虫学习，爬了乐高官网的说明书，给自己写点用得上的东西
基于Scrapy-redis的分布式股票爬虫系统实现及HTM网络股票预测
主要财经媒体新闻爬虫
基于scrpay的薄荷网食物数据爬虫，数据很全哦
爬虫电商项目:用scrapy分布式爬虫框架爬取当当商品信息,用selenium模拟登录淘宝和京东收集商品信息
python爬虫之猫眼专业版
基于scrapy框架的亚马逊爬虫，采集商品和评论等信息
基于Scrapy的网络（微薄and知乎)爬虫(A weibo spider written in Scrapy)
好大夫网站离线爬虫程序集
使用Scrapy的Instagram图片爬虫
京东商品爬虫，绘制历史价格走势
基于Python3的12306抢票爬虫，10个线程开抢，智能过滤凌晨12：00到7：00发车的车次。
爬虫_工商信息(新)
自动将字体文件映射为编码，主要用于中文字体反爬虫的破解
大众点评爬虫
携程网机票爬虫
QQ 空间动态爬虫，利用cookie登录获取所有可访问好友空间的动态保存到本地
微博图片爬虫，极速下载、高清原图、多种命令、简单实用。
scrapy + 爬虫调度管理
知乎标签页爬虫
酒店数据的python爬虫(this project has been abandoned)
微博评论爬虫+评论html tag清洗+中文词云生成
京东商品爬虫服务
自己写的一些爬虫集合，包括淘宝，天猫，京东等
🐜python爬虫
基于Pyqt5的播放器，结合爬虫，数据来源于网络
python版的新浪微博爬虫
用于爬虫IP代理proxy
监控丝芙兰是否补货的爬虫脚本
一个基于 HttpCanary 和 Python 的爬虫项目
反反爬虫
垂直爬虫系统以及工商信息爬取与解析
人民日报爬虫(scrapy)
Python实现的Google商店的爬虫
新浪微博爬虫，功能包括：爬取用户信息、关注、粉丝，爬取超级话题用户及粉丝相关信息
京东评论爬虫，包含对数据的采集、清洗、可视化、分析等过程，作为数据库课程设计项目
自动登录sina微博，主要为后续开发爬虫做的基础性工作
新浪微博爬虫，功能包括：爬取用户信息、关注、粉丝，爬取超级话题用户及粉丝相关信息
京东评论爬虫，包含对数据的采集、清洗、可视化、分析等过程，作为数据库课程设计项目
Python课程作业：爬虫爬取豆瓣图书信息
网易云音乐评论爬虫
SCI期刊信息爬虫
上市公司公告爬虫
基于 asyncio,aiohttp,uvloop 的爬虫框架
晋江文学城小说爬虫(Android API)
晋江文学城小说爬虫(Android API)
有道词典python爬虫翻译
python3,unsplash,requests,爬虫,简单下载
python爬虫集合
谷歌学术爬虫，根据搜索词汇总信息表格并保存
性感美女图片爬虫
爬虫项目：INC500 Spider (世界5000强公司爬虫)
一个爬取Konachan.com网站图片的爬虫
云南大学选课爬虫，提供余课提醒服务，实现了自动抢课
电子商务网站：京东，淘宝，拼多多的爬虫集合
谷歌爬虫，自动解析谷歌搜索信息，需搭配clash使用，生成cvs
中文语料爬取爬虫
知乎爬虫+AI作诗。
爬虫所需要的IP代理，抓取九个网站的代理IP检测/清洗/入库/更新，添加调用接口
JS逆向—破解有道、百度、谷歌翻译爬虫参数（sign）
精通python爬虫框架scrapy源码
荔枝FM爬虫
网易云音乐评论爬虫