Flink系列之Flink集群搭建
创始人
2024-03-07 11:08:04
0

title: Flink系列


二、Flink集群搭建

2.1 Flink的Standalone模式集群安装

1、上传解压重命名

[root@hadoop10 software]# tar -zxvf flink-1.14.3-bin-scala_2.12.tgz
[root@hadoop10 software]# mv flink-1.14.3 flink

在这里插入图片描述

2、进入到解压之后的目录里面修改配置文件flink-conf.yaml

[root@hadoop10 conf]# cd /software/flink/conf/
[root@hadoop10 conf]# vim flink-conf.yaml 

修改jobmanager.rpc.address 如下:

jobmanager.rpc.address: hadoop10

截图如下:

在这里插入图片描述

3、修改masters为如下

[root@hadoop10 conf]# vim masters 
[root@hadoop10 conf]# cat masters 
hadoop10:8081
[root@hadoop10 conf]# 

4、修改workers为如下

[root@hadoop10 conf]# vim workers 
[root@hadoop10 conf]# cat workers 
hadoop11
hadoop12
[root@hadoop10 conf]# 

5、分发到hadoop11、hadoop12节点

scp -r /software/flink hadoop11:/software/
scp -r /software/flink hadoop12:/software/

6、启动集群

在hadoop10上面启动

[root@hadoop10 bin]# cd /software/flink/bin/
[root@hadoop10 bin]# start-cluster.sh 
Starting cluster.
Starting standalonesession daemon on host hadoop10.
Starting taskexecutor daemon on host hadoop11.
Starting taskexecutor daemon on host hadoop12.
[root@hadoop10 bin]# 

7、启动之后各个节点上面的进程

主节点hadoop10:

[root@hadoop10 bin]# jps
5041 StandaloneSessionClusterEntrypoint
5162 Jps

从节点hadoop11:

[root@hadoop11 software]# jps
4721 TaskManagerRunner
4822 Jps

从节点hadoop12:

[root@hadoop12 software]# jps
4678 TaskManagerRunner
4782 Jps

8、浏览器中访问页面查看

访问链接: http://hadoop10:8081

正常启动之后页面如下显示:
在这里插入图片描述

2.2 其他模式后面学完一些知识之后再讲解。需要更多的理论支撑。



声明:
        文章中代码及相关语句为自己根据相应理解编写,文章中出现的相关图片为自己实践中的截图和相关技术对应的图片,若有相关异议,请联系删除。感谢。转载请注明出处,感谢。


By luoyepiaoxue2014

B站: https://space.bilibili.com/1523287361 点击打开链接
微博地址: http://weibo.com/luoyepiaoxue2014 点击打开链接

相关内容

热门资讯

AWSECS:访问外部网络时出... 如果您在AWS ECS中部署了应用程序,并且该应用程序需要访问外部网络,但是无法正常访问,可能是因为...
AWSElasticBeans... 在Dockerfile中手动配置nginx反向代理。例如,在Dockerfile中添加以下代码:FR...
银河麒麟V10SP1高级服务器... 银河麒麟高级服务器操作系统简介: 银河麒麟高级服务器操作系统V10是针对企业级关键业务...
北信源内网安全管理卸载 北信源内网安全管理是一款网络安全管理软件,主要用于保护内网安全。在日常使用过程中,卸载该软件是一种常...
AWR报告解读 WORKLOAD REPOSITORY PDB report (PDB snapshots) AW...
AWS管理控制台菜单和权限 要在AWS管理控制台中创建菜单和权限,您可以使用AWS Identity and Access Ma...
​ToDesk 远程工具安装及... 目录 前言 ToDesk 优势 ToDesk 下载安装 ToDesk 功能展示 文件传输 设备链接 ...
群晖外网访问终极解决方法:IP... 写在前面的话 受够了群晖的quickconnet的小水管了,急需一个新的解决方法&#x...
不能访问光猫的的管理页面 光猫是现代家庭宽带网络的重要组成部分,它可以提供高速稳定的网络连接。但是,有时候我们会遇到不能访问光...
Azure构建流程(Power... 这可能是由于配置错误导致的问题。请检查构建流程任务中的“发布构建制品”步骤,确保正确配置了“Arti...