CDH6.3.2 搭建Flink1.14.3

下载地址

链接: https://pan.baidu.com/s/1-SZraAWFmYi_6WaUBOtpJg?pwd=732h

提取码: 732h

开始搭建

  1. # 解压文件
  2. unzip flink1.14.3-on-cdh6.3.2.zip
  3. # 移动到httpd服务下面
  4. mv flink1.14.3-on-cdh6.3.2.zip /var/www/html/flink1.14.3

在cdh配置pracel地址

CDH6.3.2 搭建Flink1.14.3 - 图1

检查新的parcel并分配和激活

CM-Server主节点上,将FLINK_ON_YARN-1.14.0.jarFLINK-1.14.3.jar包复制到/opt/cloudera/csd/目录下(目的是让cm识别)

  1. [root@cm1 bin] cp /var/www/html/flink1.14.3/FLINK-1.14.3.jar /opt/cloudera/csd/
  2. [root@cm1 bin] cp /var/www/html/flink1.14.3/FLINK_ON_YARN-1.14.3.jar /opt/cloudera/csd/

复制flink on CDH必须的依赖包,并分发到slave机器

[root@cm1 bin] cp /var/www/html/flink1.14.3/flink-shaded-hadoop-2-uber-3.0.0-cdh6.3.2-10.0.jar /opt/cloudera/parcels/FLINK/lib/flink/lib/
[root@cm1 bin] xsync /opt/cloudera/parcels/FLINK/lib/flink/lib/

重启Cloudera Manager Server

systemctl restart cloudera-scm-server

添加服务

CDH6.3.2 搭建Flink1.14.3 - 图2

选择FLINK yarn模式

CDH6.3.2 搭建Flink1.14.3 - 图3

选择对应的机器分配

CDH6.3.2 搭建Flink1.14.3 - 图4

如果目前没有开启kerberos,记得清除它2个配置

CDH6.3.2 搭建Flink1.14.3 - 图5

启动完成

CDH6.3.2 搭建Flink1.14.3 - 图6