flink on yarn 的yarn.jobmanager.containers参数使用

在 Flink on YARN 中,yarn.jobmanager.containers 参数用于配置在 YARN 上启动 Flink 集群时,JobManager 使用的容器数量。每个容器都会运行一个 Flink JobManager 实例。

在 Flink on YARN 中,Flink 集群可以以两种模式运行:独立集群模式(Standalone Cluster Mode)和会话模式(Session Mode)。

  • 独立集群模式:在独立集群模式下,Flink 在 YARN 上作为一个独立的应用程序运行。在这种模式下,yarn.jobmanager.containers 参数指定启动的 JobManager 容器数量。

    例如,假设你想在 YARN 上启动一个 Flink 集群,并且需要两个 JobManager 容器,可以使用以下命令:

    ./bin/yarn-session.sh -n 2 -tm 1024 -s 2 -jm 1024 

你可能感兴趣的:(hadoop,flink,flink,大数据)