Pinned Repositories
aliexpress-amazon-and-ebay-product-sales-calwer
阿里速卖通-亚马逊-易贝网的商品销量抓取及统计程序
apiframe-php7-framework
一个基于php7的快速、精简api开发框架。mvcs层结构。支持读写分离连接、多库支持。支持composer功能扩展。非常方便地适用于开发APP服务器端接口程序。
beego-simple-go-site-enterprise
年为了接触GO开发,使用GO语言beego这个Web框架开发的简单网站页面,读取数据库进行WEB展现。上传的内容包括beego开发的程序代码、数据表SQL文件、以及显示示例图片。
blog-site-api-ssm-springmvc
Java项目-使用SSM(Spring,SpringMVC,Mybatis)开发的技术博客网站的API接口。
china-gaotie-map_python_web.py
**高铁地图(通过编辑各城市高铁站的经纬度数据,并在地图上通过线路连续实现动态展示**高铁地图)线路越粗,设计时速越高,目前最高350KM/h。China High Speed Rail Map (by editing the latitude and longitude data of each city's high-speed rail station, and continuously displaying the China High-speed Railway map through the line on the map) The thicker the line, the higher the design speed, currently up to 350KM/h.
china-high-speed-rail-map_site_python
**高铁地图网。在**地图上展示**各条高铁线路。是一个用python语种,利用web.py框架开发的一个小型高铁地图网此为对原项目https://github.com/KermitCode/china-gaotie-map_python_web.py的一个简化版本处理。
get_all_domain_php_program
通过网站之间的链接抓取全网域名的php程序, 闲时玩玩,然后动手实现了一下,通过对网站里的出站域名,一直循环抓取所有域名入库,来取得全网域名。域名存储表:webinfo.sql, 抓了一段时间,日志文件:webinfo.log。目前有8万来个域名吧。
joke-site
04007joke笑话是一个集众多文字笑话和大量图片笑话一起的笑话网站,2012年左右,为了学习YII框架进行开发的一个网站,从其它笑话网抓取了很多笑话数据,完全独立开发的网站前后台、前端和后端整站,费了很多的心血。因为笑话图片太多,25000+张图片,总大小接近2G,不便上传至git,故未上传至仓库中。
keframe-php.framework
KeFrame是一个个人开发的简单PHP框架。网上已经有太多的框架,我写此框架只是想有一个简单小巧、拥有基本功能、用起来顺手的框架,于是KeFrame诞生了。如果你觉得去研究市面上的框架比较费力的话,你可以从研究此框架入手。框架仍在持续完善,如发现有不足之处,敬请指正包涵。
nginx_lua_redis_website_weather
使用lua+redis开发的简单web站点,每天抓取全国主要城市的天气数据存入redis,根据气温显示每日的最舒适的城市明细。(nginx_lua_redis_website_weather) 功能:用shell定时执行两个update的lua程序,一个是每天更新全国(含各省份的天气数据进入redis).二个是每天更新全国各个省(并发同时抓取)下所有城市的天气数据。
KermitCode's Repositories
KermitCode/china-gaotie-map_python_web.py
**高铁地图(通过编辑各城市高铁站的经纬度数据,并在地图上通过线路连续实现动态展示**高铁地图)线路越粗,设计时速越高,目前最高350KM/h。China High Speed Rail Map (by editing the latitude and longitude data of each city's high-speed rail station, and continuously displaying the China High-speed Railway map through the line on the map) The thicker the line, the higher the design speed, currently up to 350KM/h.
KermitCode/aliexpress-amazon-and-ebay-product-sales-calwer
阿里速卖通-亚马逊-易贝网的商品销量抓取及统计程序
KermitCode/nginx_lua_redis_website_weather
使用lua+redis开发的简单web站点,每天抓取全国主要城市的天气数据存入redis,根据气温显示每日的最舒适的城市明细。(nginx_lua_redis_website_weather) 功能:用shell定时执行两个update的lua程序,一个是每天更新全国(含各省份的天气数据进入redis).二个是每天更新全国各个省(并发同时抓取)下所有城市的天气数据。
KermitCode/china-high-speed-rail-map_site_python
**高铁地图网。在**地图上展示**各条高铁线路。是一个用python语种,利用web.py框架开发的一个小型高铁地图网此为对原项目https://github.com/KermitCode/china-gaotie-map_python_web.py的一个简化版本处理。
KermitCode/keframe-php.framework
KeFrame是一个个人开发的简单PHP框架。网上已经有太多的框架,我写此框架只是想有一个简单小巧、拥有基本功能、用起来顺手的框架,于是KeFrame诞生了。如果你觉得去研究市面上的框架比较费力的话,你可以从研究此框架入手。框架仍在持续完善,如发现有不足之处,敬请指正包涵。
KermitCode/joke-site
04007joke笑话是一个集众多文字笑话和大量图片笑话一起的笑话网站,2012年左右,为了学习YII框架进行开发的一个网站,从其它笑话网抓取了很多笑话数据,完全独立开发的网站前后台、前端和后端整站,费了很多的心血。因为笑话图片太多,25000+张图片,总大小接近2G,不便上传至git,故未上传至仓库中。
KermitCode/get_all_domain_php_program
通过网站之间的链接抓取全网域名的php程序, 闲时玩玩,然后动手实现了一下,通过对网站里的出站域名,一直循环抓取所有域名入库,来取得全网域名。域名存储表:webinfo.sql, 抓了一段时间,日志文件:webinfo.log。目前有8万来个域名吧。
KermitCode/today-in-history-full-website
历史上的今天网-按日期记录着历史上的今天发生的大事。此为2012年使用YII框架完全独立写的一个网站(中英双语版),包括抓取全站12000+历史事件记录,并调用google进行全部翻译,同时有开发完整管理后台。
KermitCode/budejie.com
之前对百思不得姐网站进行过一次采集,包括文字段子,图片、声音、视频入mysql数据库,总共约8000来条数据,因为百思不得姐的列表页面上只会放出前100页(好像是100,我也忘了),所以通过火车头采集的话只能采集到100页的数据,不过也不少了。抓取下来的图片+视频+声音文件大约8.5G。这些太大,没法放上来 这里是对百思不得姐采集得到的数据,已经入MYSQL,这是导出的sql文件。主要是con_duanzi.sql。另外还有百思不得姐的采集规则.lgrp格式。
KermitCode/bolg-article-api-java-study
使用java开发了的个人小笔记站的API接口(也许后期可能用来做VUE的服务端接口)。主要有文章列表接口;文章详情扩接口;评论接口;以及文章分类接口。通过此项目能熟悉JAVA进行WEB开发的流程。
KermitCode/taobao-crawler-and-translate-program
淘宝抓取和翻译程序
KermitCode/work-experience-website
此网站(原名:名企工作网)为2011年至2012年期间花费了很多心血完全独立写成的一个完整网站,包括整个网站前后端、以及功能丰富的后台功能、并对外网进行了很多文章、评价数据、待遇数据进行了抓取发布,内附网站界面图,网站主要收集是在一些知名企业的工作经历文章、工作面试文章、职场相关的知识,以及大家对企业的评价和透露的薪资待遇数据。
KermitCode/KermitCode
XML-RPC扩展的使用
KermitCode/python-beautifulsoup-house-data-site
使用python中BeautifulSoup模块抓取房产成交数据呈现商品房、二手房的成交走势,从而关注房产行情。抓取数据入数据表中,前端展示使用PHP简单写了点程序,写此程序是只是为了熟悉python的数据抓取,页面呈出也未进行其它美化处理,只是用bootstrap简单进行呈现,
KermitCode/vip.com-and-vancl.com-Crawler
唯品会网站vip.com的抓取程序
KermitCode/apiframe-php7-framework
一个基于php7的快速、精简api开发框架。mvcs层结构。支持读写分离连接、多库支持。支持composer功能扩展。非常方便地适用于开发APP服务器端接口程序。
KermitCode/beego-simple-go-site-enterprise
年为了接触GO开发,使用GO语言beego这个Web框架开发的简单网站页面,读取数据库进行WEB展现。上传的内容包括beego开发的程序代码、数据表SQL文件、以及显示示例图片。
KermitCode/blog-site-api-ssm-springmvc
Java项目-使用SSM(Spring,SpringMVC,Mybatis)开发的技术博客网站的API接口。
KermitCode/live-video-barrage-Lua-server
视频直播弹幕服务器端代码,使用nginx+lua+redis实现。有垃圾词和敏感词过滤功能,返回json格式。
KermitCode/normal-cms-admin-background-site
通用管理后台是一个管理后台的基础程序,包括管理员的登录;管理员的增加修改删除、权限分配、操作记录基础功能。包括后台功能菜单的新增修改编辑功能;包括后台配置项的动态增加修改删除;可对配置项进行文本、单选、多选设置等核心基础功能。用户可在此基础上进行后台其它业务开发。
KermitCode/python_background_task_framework
Python后台任务程序简单框架,基于Python3.8开发。