• Ambari 常用 REST API(转)


    Ambari 常用的 REST API 介绍

    Ambari 借鉴了很多成熟分布式软件的 API 设计。Rest API 就是一个很好地体现。通过 Ambari 的 Rest API,可以在脚本中通过 curl 维护整个集群。并且,我们可以用 Rest API 实现一些无法在 Ambari GUI 上面做的操作。下面是一些实例。

    实例 1,通过 API 卸载已安装的 Service

    目前 Ambari 不支持在 GUI 上面卸载已安装的 Service。所以当一个 Service 不再需要的时候,用户没法删除掉该 Service。幸运的是 Ambari 提供了 DELETE 的 Rest API,我们可以通过该 API 来删除 Ambari 中 Service。不过这里需要注意,这个方法只是从 Ambari Service 中删除了 Service。这样一来,Ambari 的 GUI 界面中不再显示这个 Service。但是 Service 本身还安装在 Agent 所在的机器。如果用户需要彻底的清除掉这个 Service,仍需要手工的到每个机器卸载(例如,在每个机器执行 yum erase)。

    这里我以删除 Storm 为例。卸载之前,需要确认是否停掉了该 Service。我们通过 GET 方法来得到这个结果(这里当然也可以直接从 GUI 上面看到 Service 状态)。具体的命令如下:

    1
    2
    curl -u admin:admin -H "X-Requested-By: ambari" -X GET
       http://zwshen86:8080/api/v1/clusters/bigdata/services/STORM

    命令中的 zwshen86 为 Ambari Server 的机器名(端口默认为 8080),bigdata 为 cluster 名字,STORM 为 Service 的名字。

    在返回的报文中,可以看到 State 字段。如果是 INSTALLED,代表这个 Service 已经是停掉的状态。我们可以继续删除步骤。如果不是 INSTALLED,则需要先停掉这个 Service,可以从 WEB 上操作,也可以用 Rest API。

    图 17. Get 返回的结果

    图 17. Get 返回的结果

    用 Rest API 停掉 Service 的命令格式如下,有兴趣的朋友可以尝试一下。

    1
    2
    3
    curl -u admin:admin -H "X-Requested-By: ambari" -X PUT -d '{"RequestInfo":
            {"context":"Stop Service"},"Body":{"ServiceInfo":{"state":"INSTALLED"}}}' 
            http://AMBARI_SERVER_HOST:8080/api/v1/clusters/c1/services/SERVICE_NAME

    执行如下命令删除 STORM:

    1
    2
    curl -u admin:admin -H "X-Requested-By: ambari" -X
    DELETE  http://zwshen86:8080/api/v1/clusters/bigdata/services/STORM

    执行完成后,Storm 就从 Ambari 的 Service 里面删掉了,但是 Storm 的 package 还存在于机器。

    图 18. Storm 的 RPM 包

    图 18. Storm 的 RPM 包

    如果需要彻底清除掉 Storm 的 package,则需要到各个 Agent 机器执行如下命令。

    1
    yum erase“storm_2_2*”

    执行完后,这个 Service 就被彻底的清除掉了。

    实例 2,获取 Service 的 Component 和 Host 列表

    上个实例中,让用户登录到每个机器去执行 yum 卸载安装包,其实是不太现实的。一般我们会写一个脚本先通过 curl 调用 GET 方法,先获取到 Service 的 Component 列表,然后再调用 GET 方法,获取 Component 的机器列表,接着调用 DELETE 从 Ambari 中删除 Service。最后脚本通过 SSH 登录到各个 Agent 机器上执行 yum 卸载安装包。脚本示例代码如下(该脚本只能在 Ambari Server 上执行,因为 Ambari Server 有无密码登录所有 Agent 机器的权限)。

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    40
    41
    42
    43
    44
    45
    46
    47
    48
    49
    #!/bin/sh
    GetHostList()
    {
     curl -u admin:admin -H "X-Requested-By: ambari" -X GET
     http://$AMBARI_HOST:8080/api/v1/clusters/$CLUSTER/services/$SERVICE/components/$1
     2>/dev/null |grep host_name|awk -F: '{print $2}'|sed 's/"//g' >> temp_host_list
    }
     
    GetServiceComponent()
    {
     curl -u admin:admin -H "X-Requested-By: ambari" -X GET
     http://$AMBARI_HOST:8080/api/v1/clusters/$CLUSTER/services/$SERVICE
     2>/dev/null | grep "component_name" > ./temp_component_list
     sed -i 's/"//g' ./temp_component_list
     sed -i 's/,//g' ./temp_component_list
    }
     
     
    if [ $# != 4 ]; then
     echo "Usage: $0 Ambari_Server Cluster_Name Service_Name Package_Name"
     exit 1
    fi
     
    AMBARI_HOST=$1
    CLUSTER=$2
    SERVICE=$3
    PACKAGE=$4
     
    GetServiceComponent
     
    cat ./temp_component_list|while read line
    do
     COMPONENT=`echo $line|awk -F: '{print $2}'`
     GetHostList $COMPONENT
    done
     
    curl -u admin:admin -H "X-Requested-By: ambari" -X DELETE
    http://$AMBARI_HOST:8080/api/v1/clusters/$CLUSTER/services/$SERVICE
     
    rm -f ./temp_component_list >/dev/null 2>&1
    #delete duplicated lines (duplicated host name)
     
    hosts=`cat temp_host_list|sort |uniq`
    for host in $hosts
    do
     ssh $host "yum erase $PACKAGE"
    done
     
    rm -f temp_host_list >/dev/null 2>&1

    实例 3,通过 API 执行 Service 的命令

    这里,我们以调用 API 执行 Service Check 为例。首先需要知道命令的名字,这里每个 Service 的 Check 命令也是不同的。不过 Service Check 是 build-in 的命令,所以有一定的格式可循。

    格式大致如下:

    1
    NAME_SERVICE_CHCECK

    只要将 NAME 替换成对应的 Service,就是该 Service 的 Check 命令。以 YARN 为例,执行如下的命令。

    1
    2
    3
    4
    curl -u admin:admin -H "X-Requested-By: ambari" -X POST -d '
       {"RequestInfo":{"context":"My YARN Service Check", "command":
       "YARN_SERVICE_CHECK"},"Requests/resource_filters":[{"service_name":"YARN"}]}'
       http://zwshen86:8080/api/v1/clusters/bigdata/requests

    执行完后,可以发现在 WEB GUI 上面,就多了一个正在进行的 Operation。如下图:

    图 19. Service Check 执行进度

    图 19. Service Check 执行进度

    在这里我们可以发现,这个 Operation 的名字其实就是 context 字段的值。我们在 WEB GUI 上面直接点击 Service Check 的时候,Operation 的名字其实是 JS code 中指定了一个特殊 context。

    这里我们也可以指定执行自定义命令(Custom Comand)。以给 Resource Manager 添加的 GetMem 为例。执行如下的命令。

    1
    2
    3
    4
    5
    curl -u admin:admin -H "X-Requested-By: ambari" -X POST -d '
       {"RequestInfo":{"context":"Get RM host Mem
    Usage","command":"GetMem"},"Requests/resource_filters":[{"service_name":
       "YARN","component_name":"RESOURCEMANAGER","hosts":"zwshen86.eng.platformlab.ibm.com"}]}'
       http://zwshen86:8080/api/v1/clusters/bigdata/requests

    WEB GUI 的显示如下

    图 20. 自定义命令 GetMem 的执行进度

    图 20. 自定义命令 GetMem 的执行进度

    跟 Service Check 相比,不难看出其中的差异。对于自定义命令,我们需要指定参数 Component 以及 Host。当这两个参数缺失的时候,Ambari 是不会接受这个请求的。

    通过这三个简单实例,就可以体会到 Ambari Rest API 的作用。在 Rest API 的基础上,就算脱离了 WEB,我们也可以很好地控制 Ambari。当然,我们也不得不记住很多生涩的参数。因此,大多情况下,只有当 Ambari 的 GUI 不足以完成需求,或者不期望暴露在 GUI 上面的时候,就可以使用 Rest API。有兴趣的读者可以搜索下 Ambari Server 目录所有的 Python 脚本,其实 Ambari 自身很多地方都在用 curl 调用 Rest API。

    转自

  • 相关阅读:
    《虚拟伙伴》AR增强现实应用开发总结
    捕获起英文名Edda的灵感来源,我的心愿是程序员这个行业能够男女人数平衡
    侯捷老师C++大系之C++面向对象开发:(一)不带指针的类:Complex复数类的实现过程
    【腾讯GAD暑期训练营游戏程序班】游戏中的物理系统作业说明文档
    socketAPI:一个最简单的服务器和对应的客户端C语言的实现
    C/C++实践笔记 008
    C/C++实践笔记 007
    学习java之泛型类和泛型方法
    学习java之利用泛型访问自己定义的类
    学习java之HashMap和TreeMap
  • 原文地址:https://www.cnblogs.com/flymercurial/p/7846941.html
Copyright © 2020-2023  润新知