Flink系列之Flink集群搭建
创始人
2024-04-15 16:04:42

title: Flink系列


二、Flink集群搭建

2.1 Flink的Standalone模式集群安装

1、上传解压重命名

[root@hadoop10 software]# tar -zxvf flink-1.14.3-bin-scala_2.12.tgz
[root@hadoop10 software]# mv flink-1.14.3 flink

在这里插入图片描述

2、进入到解压之后的目录里面修改配置文件flink-conf.yaml

[root@hadoop10 conf]# cd /software/flink/conf/
[root@hadoop10 conf]# vim flink-conf.yaml 

修改jobmanager.rpc.address 如下:

jobmanager.rpc.address: hadoop10

截图如下:

在这里插入图片描述

3、修改masters为如下

[root@hadoop10 conf]# vim masters 
[root@hadoop10 conf]# cat masters 
hadoop10:8081
[root@hadoop10 conf]# 

4、修改workers为如下

[root@hadoop10 conf]# vim workers 
[root@hadoop10 conf]# cat workers 
hadoop11
hadoop12
[root@hadoop10 conf]# 

5、分发到hadoop11、hadoop12节点

scp -r /software/flink hadoop11:/software/
scp -r /software/flink hadoop12:/software/

6、启动集群

在hadoop10上面启动

[root@hadoop10 bin]# cd /software/flink/bin/
[root@hadoop10 bin]# start-cluster.sh 
Starting cluster.
Starting standalonesession daemon on host hadoop10.
Starting taskexecutor daemon on host hadoop11.
Starting taskexecutor daemon on host hadoop12.
[root@hadoop10 bin]# 

7、启动之后各个节点上面的进程

主节点hadoop10:

[root@hadoop10 bin]# jps
5041 StandaloneSessionClusterEntrypoint
5162 Jps

从节点hadoop11:

[root@hadoop11 software]# jps
4721 TaskManagerRunner
4822 Jps

从节点hadoop12:

[root@hadoop12 software]# jps
4678 TaskManagerRunner
4782 Jps

8、浏览器中访问页面查看

访问链接: http://hadoop10:8081

正常启动之后页面如下显示:
在这里插入图片描述

2.2 其他模式后面学完一些知识之后再讲解。需要更多的理论支撑。



声明:
        文章中代码及相关语句为自己根据相应理解编写,文章中出现的相关图片为自己实践中的截图和相关技术对应的图片,若有相关异议,请联系删除。感谢。转载请注明出处,感谢。


By luoyepiaoxue2014

B站: https://space.bilibili.com/1523287361 点击打开链接
微博地址: http://weibo.com/luoyepiaoxue2014 点击打开链接

相关内容

热门资讯

demo什么意思 demo版本... 618快到了,各位的小金库大概也在准备开闸放水了吧。没有小金库的,也该向老婆撒娇卖萌服个软了,一切只...
北京的名胜古迹 北京最著名的景... 北京从元代开始,逐渐走上帝国首都的道路,先是成为大辽朝五大首都之一的南京城,随着金灭辽,金代从海陵王...
世界上最漂亮的人 世界上最漂亮... 此前在某网上,选出了全球265万颜值姣好的女性。从这些数量庞大的女性群体中,人们投票选出了心目中最美...
苗族的传统节日 贵州苗族节日有... 【岜沙苗族芦笙节】岜沙,苗语叫“分送”,距从江县城7.5公里,是世界上最崇拜树木并以树为神的枪手部落...