flink(standalone模式)的安装

集群规划如下

JobManager

TaskManager

hadoop01

y

y

hadoop02

n

y

hadoop03

n

y

首先下载安装包

flink(standalone模式)的安装_第1张图片

flink(standalone模式)的安装_第2张图片

flink(standalone模式)的安装_第3张图片

 

上传服务器并解压

flink(standalone模式)的安装_第4张图片 

解压到servers文件夹

flink(standalone模式)的安装_第5张图片

flink(standalone模式)的安装_第6张图片

 配置环境变量

flink(standalone模式)的安装_第7张图片

使环境变量起作用

修改Flink的配置文件

flink(standalone模式)的安装_第8张图片 

修改flink-conf.yml

flink(standalone模式)的安装_第9张图片

flink(standalone模式)的安装_第10张图片 

flink(standalone模式)的安装_第11张图片 

注意:修改yml格式的配置文件时,key和value之间必须得有一个空格

修改masters文件

flink(standalone模式)的安装_第12张图片 

修改workes文件

flink(standalone模式)的安装_第13张图片 

指定hadoop配置目录

在环境变量配置文件中指定hadoop的配置目录

flink(standalone模式)的安装_第14张图片

使配置文件生效

 分发flink到其他主机

分发flink到hadoop002

flink(standalone模式)的安装_第15张图片

分发flink到hadoop003

flink(standalone模式)的安装_第16张图片

分发环境变量配置文件

使环境变量起作用

 启动flink集群

flink(standalone模式)的安装_第17张图片

jps查看进程

flink(standalone模式)的安装_第18张图片

查看flink的webui

flink(standalone模式)的安装_第19张图片

 standalone集群的测试任务——单词计数

flink run examples/batch/WordCount.jar --input hdfs://hadoop001:9000/input/ --output hdfs://hadoop001:9000/output/result.txt

flink(standalone模式)的安装_第20张图片

查看hdfs中的results.txt

flink(standalone模式)的安装_第21张图片

flink(standalone模式)的安装_第22张图片

查看单词计数结果

flink(standalone模式)的安装_第23张图片

你可能感兴趣的:(flink,大数据)