/AntJob

分布式任务调度系统，纯NET打造的重量级大数据实时计算平台，万亿级调度经验积累！面向1000作业以内中小企业大数据分析场景。

Primary LanguageC#MIT LicenseMIT

#星尘 AntJob 蚂蚁调度，重量级调度系统！

设计概要

计算型应用（实现IJob）

计算应用->调度中心: app登录
note over 调度中心: app/secret
计算应用-->>调度中心: 注册作业

Web控制台->调度中心: 设置参数
Web控制台->调度中心: 启动作业

计算应用->调度中心: 申请作业分片
调度中心->计算应用: 返回分片
note over 计算应用: 多线程处理任务

计算应用-->调度中心: 上报局部状态
note over Web控制台: 作业状态看板
计算应用->调度中心: 处理成功
计算应用-->调度中心: 处理失败

系统架构

调度中心主从架构

计算应用->调度中心: 登录
调度中心->数据库: 连接
计算应用-->>调度中心2: 故障转移
调度中心2->数据库: 连接

计算应用2->调度中心: 登录
计算应用3->调度中心: 登录
计算应用4->调度中心: 登录

Web控制台-->调度中心: 监控

新生命开源项目矩阵

各项目默认支持net4.5/net4.0/netstandard2.0

项目 年份 状态 .NET Core 说明
基础组件 支撑其它中间件以及产品项目
NewLife.Core 2002 维护中 √ 算法、日志、网络、RPC、序列化、缓存、多线程
XCode 2005 维护中 √ 数据中间件，MySQL、SQLite、SqlServer、Oracle
NewLife.Net 2005 维护中 √ 网络库，千万级吞吐率，学习gRPC、Thrift
NewLife.Cube 2010 维护中 √ Web魔方，权限基础框架，集成OAuth
中间件 对接各知名中间件平台
NewLife.Redis 2017 维护中 √ Redis客户端，微秒级延迟，百亿级项目验证
NewLife.RocketMQ 2018 维护中 √ 支持Apache RocketMQ和阿里云消息队列
NewLife.Thrift 2019 维护中 √ Thrift协议实现
NewLife.Hive 2019 维护中 √ 纯托管读写Hive，Hadoop数据仓库，基于Thrift协议
NewLife.MQ 2016 维护中 √ 轻量级消息队列
NoDb 2017 开发中 √ NoSQL数据库，百万级kv读写性能，持久化
NewLife.Cache 2018 维护中 √ 自定义缓存服务器
NewLife.Ftp 2008 维护中 √ Ftp客户端实现
NewLife.MySql 2018 开发中 √ MySql驱动
产品平台 产品平台级，编译部署即用，个性化自定义
AntJob 2019 开发中 √ 蚂蚁调度系统，大数据实时计算平台
Stardust 2018 开发中 √ 星尘，微服务平台，分布式平台
XLink 2016 维护中 √ 物联网云平台
XProxy 2005 维护中 √ 产品级反向代理
XScript 2010 维护中 × C#脚本引擎
NewLife.DNS 2011 维护中 × DNS代理服务器
NewLife.CMX 2013 维护中 × 内容管理系统
SmartOS 2014 保密中 C++11 嵌入式操作系统，完全独立自主，ARM Cortex-M芯片架构
GitCandy 2015 维护中 × Git管理系统
其它
XCoder 2006 维护中 × 码神工具，开发者必备
XTemplate 2008 维护中 × 模版引擎，T4(Text Template)语法
X组件 .NET2.0 2002 存档中 .NET2.0 日志、网络、RPC、序列化、缓存、Windows服务、多线程
X组件 .NET4.0 2002 存档中 .NET4.0 日志、网络、RPC、序列化、缓存、Windows服务、多线程

新生命开发团队

新生命团队始于2002年，部分开源项目具有15年以上漫长历史，源码库保留有2010年以来所有修改记录，并一直保持更新，请确保获取得到最新版本源代码 网站：http://www.NewLifeX.com
国内：http://git.NewLifeX.com
国外：https://github.com/NewLifeX
博客：https://nnhy.cnblogs.com
QQ群：1600800/1600838