leetcode-spider

使用JS编写的的leetcode解题源码爬虫.爬取你自己的leetcode解题源码.

Insipred by bony's python leetcode downloader.

如果你也想把你在leetcode上提交且Accepted的解题代码爬下来,那么本工具就是为此需求而生!爬下来的代码可以放在github上管理和开源出来,可以作为个人展示,更可以借助leetcode-viewer将代码通过一个单页应用完美展现,几条命令就可以呈现一个leetcode源码博客,交流和展示搞起来!

需要Node 4.0及以上版本!

安装 Installation

npm i leetcode-spider -g

使用 Usage

请事先建立好如下json文件(以命名为config.json为例):

{
	"username" : "hello@gmail.com",
	"password" : "xxxxxxxxx",
	"language": ["java","c++","c"]
}

username和password对应你的的leetcode账户.

language对应于你用来解leetcode的编程语言,该项为一个数组,即使只有一种语言. 目前language字段支持填写所有leetcode的编程语言:

c++(别填cpp)
c
java
javascript (别填js)
python
c# (别填csharp)
ruby
swift
go

运行 Execution

lc-spider // 默认使用config.json为配置文件运行爬虫

程序会记录上一次爬取了哪些题目,之前爬取过的题目再次运行的时候不会爬取,除非你通过-n选项手动指定.

这也意味着,当你在进行增量爬取时,根本不需要去指定要爬哪些题目,leetcode-spider会自动知道哪些题目需要爬.

举个例子,按照我们的日常使用:

当你昨天A了5道题,你用爬虫爬了下来
然后今天你A了6道题,你今天再次运行程序

程序此时会自动检查你跟上一次爬取结果相比多写了哪些题,然后把这些新增的代码爬取下来,不会重复的去爬取,你也不用手工指定你今天AC了哪些题.

永远只用一行命令:lc-spider.(除非你想要再去爬以前爬过的题,比如你改进了修改了原先AC的代码,想把新代码爬下来,或者你新增了另一种语言的解法, 那么这种时候可以用-n选项指定具体要爬取的题目,请参考选项章节的具体内容.)

此外源码对应的leetcode的题目,也会爬取下来,放在代码目录,markdown格式.

爬取完成后会自动生成README.md文件,当你把爬下来的代码放在github上时,README.md起一个介绍和导航的作用.另外，有的同学的config.json文件是直接放在当前的代码存放目录的，那你在把这个目录上传到github上之前，请记得写.gitignore文件，在里面忽略掉你的config.json文件！不然你的用户名和密码也传到github上公开给大家了（虽然leetcode账户屁用没有）。

如果你运行lc-spider却显示无法找到命令,首先请确认一下你在npm安装lc-spider的时候是否是全局安装(也就是有没有那个-g),如果你是全局安装的,那就是你的npm的环境变量配置得不对了,请参考百度的fis团队写的这篇文章,方便不熟悉npm的同学解决自己遇到的问题.

如果还有问题,请联系我!或者开issue,只要不在睡觉,基本都可以为你解决问题~

帮助 Help

lc-spider -h

选项

-config or -c

lc-spider -c xxx.json

使用指定的配置文件运行lc-spider.默认使用的是config.json.

-number or -n

lc-spider -n 2-15 3 78-101

只爬取你指定的题目,可以使用连字符(如15-100),此处指定的是需要爬取的题号.程序会检查哪些题目你AC了,因此你可以放心的填写.比如你a了200-300之间的某几道题,但是不想一个个的指定出来,那你就大胆的写上200-300,程序会查找200-300范围内你AC的源码,并爬取下来.

hjptriplebee/leetcode-spider