Megrez21

Pinned Repositories

awesome-spider
爬虫集合
10
bilibili-user
🍥 Bilibili 用户爬虫
Language:Python00
captcha_server
一个免费开源一键搭建的通用验证码识别平台，大部分常见的中英数验证码识别都没啥问题。
Language:Python0 0 00
DouBanSpider
豆瓣读书的爬虫
Language:Python10
findtrip
机票爬虫（去哪儿和携程网）。flight tickets multiple webspider.(scrapy + selenium + phantomjs + mongodb)
Language:Python1 0 00
LianJiaSpider
链家爬虫
Language:Python10
QQ-Groups-Spider
QQ Groups Spider（QQ 群爬虫）
Language:CSS1 0 00
QQSpider
QQ空间爬虫（日志、说说、个人信息）
Language:Python1 0 00
spider
python爬虫全球网址URL滚动提取
Language:Python1 0 00
wooyun_public
This repo is archived. Thanks for wooyun! 乌云公开漏洞、知识库爬虫和搜索 crawl and search for wooyun.org public bug(vulnerability) and drops
Language:PHP10

Megrez21's Repositories

Megrez21/awesome-spider
爬虫集合
10
Megrez21/DouBanSpider
豆瓣读书的爬虫
Language:Python10
Megrez21/findtrip
机票爬虫（去哪儿和携程网）。flight tickets multiple webspider.(scrapy + selenium + phantomjs + mongodb)
Language:Python1 0 00
Megrez21/LianJiaSpider
链家爬虫
Language:Python10
Megrez21/QQ-Groups-Spider
QQ Groups Spider（QQ 群爬虫）
Language:CSS1 0 00
Megrez21/QQSpider
QQ空间爬虫（日志、说说、个人信息）
Language:Python1 0 00
Megrez21/spider
python爬虫全球网址URL滚动提取
Language:Python1 0 00
Megrez21/wooyun_public
This repo is archived. Thanks for wooyun! 乌云公开漏洞、知识库爬虫和搜索 crawl and search for wooyun.org public bug(vulnerability) and drops
Language:PHP10
Megrez21/bilibili-user
🍥 Bilibili 用户爬虫
Language:Python00
Megrez21/captcha_server
一个免费开源一键搭建的通用验证码识别平台，大部分常见的中英数验证码识别都没啥问题。
Language:Python0 0 00
Megrez21/CnkiSpider
**知网爬虫
Megrez21/CookiePool
一个强大的Cookie池项目，融合scrapy/requests/chrome储存cookie/cookie字符串/selenium等cookie形式
Megrez21/distribute_crawler
使用scrapy,redis, mongodb,graphite实现的一个分布式网络爬虫,底层存储mongodb集群,分布式使用redis实现,爬虫状态显示使用graphite实现
Megrez21/lxSpider
爬虫案例合集。包括但不限于《淘宝、京东、天猫、豆瓣、抖音、快手、微博、微信、阿里、头条、pdd、优酷、爱奇艺、携程、12306、58、搜狐、各种指数、维普万方、Zlibraty、Oalib、小说、招标网、采购网、小红书、大众点评、推特、脉脉》
Megrez21/Mooc_Downloader
学无止下载器，慕课下载器，Mooc下载，慕课网下载，**大学下载，爱课程下载，网易云课堂下载，学堂在线下载，超星学习通下载；支持视频，课件同时下载
Megrez21/music-163
爬取网易云音乐所有歌曲的评论数
Megrez21/proxy_pool
Python爬虫代理IP池(proxy pool)
Megrez21/ProxyPool
An Efficient ProxyPool with Getter, Tester and Server
Megrez21/python_AntiSpider
基于Python3实现的js加密反爬，验证码破解，字体加密反爬等其他类型反爬虫的破解
Megrez21/scrapy_jingdong
用scrapy写的京东爬虫
Language:Python0 0
Megrez21/shadowsocks-windows
If you want to keep a secret, you must also hide it from yourself.
Language:C#
Megrez21/SinaSpider
新浪微博爬虫（Scrapy、Redis）
Language:Python0 0
Megrez21/Spider-1
社交数据爬虫
Language:Python0 0
Megrez21/spiderexam
爬虫工程师面试试题
Megrez21/stockholm
一个股票数据（沪深）爬虫和选股策略测试框架
Language:Python0 0
Megrez21/tbcrawler
淘宝天猫商品爬虫
Megrez21/vvtoolbox-gui-series
本软件是一款用于m3u8下载（支持AES解密、优酷普通DRM解密）、视频解析（后续增加）的工具，同时集成部分有关于vvtoolbox相关的功能，如下载视频弹幕（后续...）等。
Megrez21/webcrawler
逆向
Megrez21/WechatSogou
基于搜狗微信搜索的微信公众号爬虫接口
Language:Python
Megrez21/zhihu_spider
知乎爬虫