• Flink集群Standalone启动脚本(源码分析)


    整个Flink集群的角色分为Jobmanager和TaskManager

    以Standalone为例来看一下脚本里面是怎样启动集群的

    找到源码的dist这里面包含了启动的脚本文件

    standalone模式下我们通过start-cluster.sh这个脚本启动

    来看下里面具体做了什么

    在最后调用了jobmanager.sh start 这个脚本和config.sh  中的TMSlaves 这个方法,分别启动了jobmanager和taskmanager

    先看一下Jobmanager

    在jobmanager.sh中导入了一些配置文件参数以外,脚本在最后执行了

    到了这个文件flink-daemon.sh 

    可以看到已经找到这样一个jobmanager的入口类org.apache.flink.runtime.entrypoint.StandaloneSessionClusterEntrypoint 了(1.6之前这里有较大的变化,详细的可以自己去研究一下)

    后面就是jobmanager的具体启动了

    现在在来看看TaskManager的启动方法config.sh 中 TMSlaves start

    taskmanager.sh中

    这里就和jobmanager的一样了,到了daemon.sh

    这就是taskmanagaer的入口类org.apache.flink.runtime.taskexecutor.TaskManagerRunner了

    整个集群jobmanager和taskmanager就启动起来了

    后面角色的具体启动后期会随缘更新

    来看一下window下的启动

    可以看到也差不多,都是走的这两个类作为启动类

  • 相关阅读:
    python处理孤立的异常点
    使用redis实现程序或者服务的高可用
    redis报错: redis.exceptions.ResponseError: value is not an integer or out of range
    angular6 使用信息提示框toast
    浏览器中模仿跨域请求
    python aes_cbc加密
    openresty钉钉免密登陆
    openresty 钉钉签名计算
    ansible服务部署
    tornado 文件上传
  • 原文地址:https://www.cnblogs.com/ljygz/p/11398761.html
Copyright © 2020-2023  润新知