本项目用于学习Flink所做的笔记,便于以后查看复习。此项目适合我这种虽然比较菜,且爱学习的人学习。
Flink SQL学习笔记提纲。持续更新。Hive SQL 离线Join VS Flink SQL 双流Join。
对比维度 | Hive SQL离线Join | Flink SQL双流Join |
---|---|---|
数据源 | 有界(离线数据) | 无界(实时数据) |
计算次数 | 一次 | 持续计算 |
计算结果 | 有界(离线数据) | 无界(实时数据) |
计算驱动 | 单边驱动 | 双边驱动 |
- Flink CEP
- 旁路输出
- Flink Operator Chain
- slot相关
- Checkpoint相关
- Flink基本架构
- SavePoint相关
- BlobServer相关
- RocksDB相关
源码编译可以使用下面命令
mvn install -DskipTests -Dfast -Dpmd.skip=true -Dcheckstyle.skip=true \
-Dmaven.javadoc.skip=true -Dmaven.compile.fork=true
缺的包可以在 https://conjars.org/repo/org/pentaho/pentaho-aggdesigner-core/5.1.5-jhyde/
https://packages.confluent.io/maven/io/confluent/kafka-schema-registry-client/7.2.2/ 下面找到。