搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)

目录

一、集群规划(2个jobmanager)

二、下载并上传至linux系统

四、修改配置文件

五、将hadoop依赖的包下载到flink的lib目录下

六、将配置好的flink分发到slave2和slave3

七、启动Flink集群


独立:不借助第三方资源管理器

多个jobmanager,由zookeeper去调用,但同一时刻只能有一个jobmanager活跃

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第1张图片 

一、集群规划(2个jobmanager)

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第2张图片

二、下载并上传至linux系统

官网下载

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第3张图片

可自行选择版本

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第4张图片

提供网盘的下载

提取码: s6jg

上传至linux系统

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第5张图片

四、修改配置文件

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第6张图片

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第7张图片

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第8张图片

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第9张图片

 masters

workers(之前的版本则vim slaves)指定taskmanager的主机

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第10张图片

五、将hadoop依赖的包下载到flink的lib目录下

提供网盘的下载

提取码: grqj

官网下载

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第11张图片

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第12张图片

六、将配置好的flink分发到slave2和slave3

在slave2中修改jobmanager的地址

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第13张图片

七、启动Flink集群

 前提:先启动zookeeper和hadoop集群

 zookeeper推荐文章

 hadoop推荐文章

 再启动Flink集群

 搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第14张图片

 查看进程

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第15张图片

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第16张图片

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第17张图片

web端访问:slave1和slave2都可以访问

slave1

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第18张图片

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第19张图片

slave2

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第20张图片

搭建Flink的Standlone独立模式-高可用(3个节点2个jobmanager)_第21张图片

 

你可能感兴趣的:(flink,flink,大数据,zookeeper,hadoop,linux)