flinkx-web产品
FlinkX Web是在FlinkX之上开发的分布式数据同步工具,提供简单易用的 操作界面,降低用户使用FlinkX的学习成本,缩短任务配置时间,避免配置过程中出错。用户可通过页面选择数据源即可创建数据同步任务,RDBMS数据源可批量创建数据同步任务,支持实时查看数据同步进度及日志并提供终止同步功能,集成并二次开发xxl-job可根据时间、自增主键增量同步数据。
任务"执行器"支持集群部署,支持执行器多节点路由策略选择,支持超时控制、失败重试、失败告警、任务依赖,执行器CPU.内存.负载的监控等等。后续还将提供更多的数据源支持、数据转换UDF、表结构同步、数据同步血缘等更为复杂的业务场景。
flinkx-web产品规划
flinkx-web产品流程图
支持的数据库
Database Type | 文档 | Flinx-web支持 | |
---|---|---|---|
Batch Synchronization | MySQL | 读 写 | |
Oracle | 读 写 | ||
SqlServer | 读 写 | ||
PostgreSQL | 读 写 | ||
DB2 | 读 写 | ||
GBase | 读 写 | ||
ClickHouse | 读 写 | ||
PolarDB | 读 写 | ||
SAP Hana | 读 写 | ||
Teradata | 读 写 | ||
Phoenix | 读 写 | ||
达梦 | 读 写 | ||
Greenplum | 读 写 | ||
Cassandra | 读 写 | ||
ODPS | 读 写 | ||
HBase | 读 写 | ||
MongoDB | 读 写 | ||
Kudu | 读 写 | ||
ElasticSearch | 读 写 | ||
FTP | 读 写 | ||
HDFS | 读 写 | ||
Carbondata | 读 写 | ||
Stream | 读 写 | ||
Redis | 写 | ||
Hive | 写 | ||
Stream Synchronization | Kafka | 读 写 | |
EMQX | 读 写 | ||
RestApi | 读 写 | ||
MySQL Binlog | 读 | ||
MongoDB Oplog | 读 | ||
PostgreSQL WAL | 读 | ||
Oracle Logminer | Coming Soon | ||
SqlServer CDC | Coming Soon |
flinkx-web产品计划
8月11日完成flinkx-web的登录功能,输出2篇文章(工作繁忙,文章未输出)8月12日设计flinkx-web的生成JSON文件的页面,输出1篇文章(工作繁忙,文章未输出)8月13日实现flinkx-web的生成JSON文件的功能,输出1篇文章(工作繁忙,文章未输出)- 8月14日完善flinkx-web的部署文档,利用平台能够实现一个源的读写操作,将flinkx的插件能够打包安装到本地
- 8月15日-8月16日,完成flinkx-web的设计页面
快速开始
快速开始
请点击:Flinkx学习
文章学习:技术交流
搜索QQ群号[678097205]或者扫描下面的二维码进入Flinkx Web的QQ群,目前正是开源的初期阶段,暂时就我一个人。