Agent管理
对于HDFS和关系型数据库类型的数据源,不方便暴露节点的场景,可选择在源端网络中部署Agent。CDM通过Agent拉取客户内部数据源的数据,但不支持写入数据。
图1-1 场景图
图1-2 Agent使用流程
前提条件
已创建集群。
新建Agent
步骤 1 登录CDM管理控制台。
步骤 2 单击左侧导航上的“集群管理”,选择CDM集群后的“作业管理 > Agent管理 > 新建Agent”,配置Agent相关信息。
图1-3 配置Agent
l IP地址:配置为源端网络中部署Agent的机器IP。
l 端口:Agent暴露的端口。
l 启用压缩:是否对数据进行压缩传输。
l 启用SSL:是否启用SSL双向认证,保证数据的安全性。
l 限流:设置agent的最大下行速率,默认不限流。
步骤 3 单击“确认”,完成Agent的创建。在Agent管理页面可查看已成功创建的Agent。
----结束
下载并安装Agent
步骤 1 在Agent管理页面,找到已成功创建的Agent。单击其后的“下载”,如图7-4所示,下载Agent。
图1-4 下载Agent
步骤 2 将下载的Agent压缩包,上传至部署Agent的机器上。
步骤 3 解压安装包后执行如下命令安装。
sh sbin/install.sh
sh sbin/start.sh
步骤 4 安装完成后,执行netstat -an检查端口是否启动监听。
----结束
连接Agent
步骤 1 在Agent管理页面,找到已成功创建的Agent。单击其后的“连接”,如图7-5所示,连接Agent。
图1-5 连接Agent
步骤 2 Agent连接成功后,即可在4.16 配置HDFS连接和4.20 配置关系数据库连接中选择相关的Agent。
----结束