Flink-1.12流批一体时代
Flink-1.12集成Hive
使用Hive构建数据仓库已经成为了比较普遍的一种解决方案。目前,一些比较常见的大数据处理引擎,都无一例外兼容Hive。Flink从1.9开始支持集成Hive,不过1.9版本为beta版,不推荐在生产环境中使用。在Flink1.10版本中,标志着对 Blink的整合宣告完成,对 Hive 的集成也达到了生产级别的要求。值得注意的是,不同版本的Flink对于Hive的集成有所差异,本文将以最新的Flink1.12版本为例,阐述Flink集成Hive的简单步骤,以下是全文,希望对你有所帮助。
Flink-1.12版本解读(源码层面)
什么是 Ansible
使用debezium采集mysql数据
使用Oracle GoldenGate同步oracle变化到kafka
1. 版本说明
- Oracle版本:
11.2.0.1.0
- Linux版本:
Centos 7.3
- Oracle GoldenGate版本:
122022_fbo_ggs_Linux_x64_shiphome
- Oracle GoldenGate for Big Data版本:
12.3.2.1.0
- 官方文档地址:https://www.oracle.com/middleware/technologies/goldengate.html