本爬虫使用,速度较快,但没有摘要等详细信息
API接口较好,但资助项目检索需要验证码
查询方式不好:当 负责人/项目批准号/依托单位 都不存在时,项目名称不能为空
官网,超难用。
查询不好用
git clone https://github.com/suqingdong/nsfc.git
cd nsfc
mkdir test
cd test
# eg.: 爬取2019年C,H学科数据
scrapy crawl nsfc_spider \
-a code=C,H \
-a startTime=2019 \
-a endTime=2019 \
-o nsfc.2019.jl \
-L INFO \
--logfile nsfc.2019.log
- 结题项目摘要信息补充