/military_news_crawler

军事新闻数据爬取

Primary LanguagePython

###爬取网站列表

	1、新浪军事
	**军情:http://mil.news.sina.com.cn/roll/index.d.html?cid=57918

	国际军情:http://mil.news.sina.com.cn/roll/index.d.html?cid=57919

	2、人民网
	**军情:http://military.people.com.cn/GB/367527/index.html

	国际防务:http://military.people.com.cn/GB/1077/index.html

	3、新华军网
	**:http://www.xinhuanet.com/mil/zhongguo.htm

	世界:http://www.xinhuanet.com/mil/shijie.htm

	4、环球军事
	http://mil.huanqiu.com/world/

	5、西陆网
	兵器快讯:http://junshi.xilu.com/dfjs/index.html

	6、参考消息
	武器装备:http://www.cankaoxiaoxi.com/mil/wqzb/

	**军情:http://www.cankaoxiaoxi.com/mil/zgjq/

	国际军情:http://www.cankaoxiaoxi.com/mil/gjjq/

	7、澎湃防务
	https://www.thepaper.cn/list_25430

	8、**军网
	http://www.81.cn/rd/node_92585.htm

	9、中华军事网
	**军情:https://military.china.com/news/

	国际军情:https://military.china.com/news2/

	10、国防科技信息网
	航天工业 http://www.dsti.net/Information/HyeList/spaceflight

	航空工业 http://www.dsti.net/Information/HyeList/aviation

	船舶工业 http://www.dsti.net/Information/HyeList/ship

	兵器工业 http://www.dsti.net/Information/HyeList/arms

爬虫说明:

	使用scrapy实现 , 每一个网站对应scrapy爬虫中的一个spider , 数据保存至Mysql数据库