flink-1.16.1集群部署

文章目录

  • flink部署
    • 一、Flink集群安装、配置和运行
    • 二、执行Flink自带的流处理程序-单词计数
    • 三、运行Flink自带的批处理作业-单词计数
  • flink运行在yarn上
    • 部署图

flink部署

Flink支持完全分布式模式,这时它由一个master节点和多个worker节点构成。在本节,我们将搭建一个如下的三个节点的Flink集群。

一、Flink集群安装、配置和运行

Flink完全分布式集群搭建步骤如下:

1、配置从master到worker节点的SSH无密登录,并保持保节点上相同的目录结构。

2、Flink要求在主节点和所有工作节点上设置JAVA_HOME环境变量,并指向Java安装的目录。

使用如下命令检查Java的安装和版本信息:

 $ java -version

3、下载Flink安装包。下载地址:https://flink.apache.org/downloads.html

4、解压安装包

你可能感兴趣的:(flink,大数据)