• ubuntu 18.04下greenplum安装笔记(一)Linux下基础环境的搭建


    背景

    需要构建一个用于数据仓库的分布式数据库集群。
    每一个节点暂时不需要进行备份,同时也不考虑坏掉的情况。
    每一个数据节点最好都不用进行过多的配置,安装起来方便。
    Greenplum的Shared-Nothing的设计思路很适合我目前的业务场景。

    物理环境

    4台安装了Linux的主机,安装的操作系统的版本均为Lubuntu 18.04。
    其中,我给他们取号了名字:

    • xiaoyao (逍遥)
      • 身份:MyCat节点
      • IP地址:192.168.0.200
    • linger (灵儿)
      • 身份:数据节点1
      • IP地址:192.168.0.201
    • yueru (月如)
      • 身份:数据节点2
      • IP地址:192.168.0.202
    • anu (阿奴)
      • 身份:数据节点3
      • IP地址:192.168.0.203

    其中,机器对应的Master和Segment如下分配:
    “逍遥”作为Master节点,其他三个节点作为Segment节点,每个机器上配置两个Primary Segment和两个Mirror Segment;同时“阿奴”作为Master Standy节点。

    好了。下载来开始安装。

    配置网络

    首先为每一台lubutu安装所缺的依赖:

    sudo apt-get install net-tools vim -y
    

    配置ip地址
    进入系统后,点击右下角的网络按钮,再点击“编辑连接...”,会弹出一个网络连接窗口,选择你目前的连接(以xiaoyao为例,我在xiaoyao上面使用的网络连接显示为“有线连接1”)并双击进入,选择弹出窗口上方的“IPv4设置”,然后将“方法(M):”对应的“自动(DHCP)”改为“手动”,并在下方一条静态ip信息(即:点击中间右侧的“添加(A)”),信息如下:

    • 地址:192.168.0.200
    • 子网掩码:255.255.255.0 (或者24)
    • 网关:192.168.0.1

    并配置DNS服务器地址为:8.8.8.8

    点击右下角保存。重新启动(或者执行命令行指令sudo service network-manager restart),在命令行输入ifconfig,可以看到ip地址已经变为了192.168.0.200。

    其他:按照这种方式在linger,yueru,anu上分别配置ip地址192.168.0.201~203。

    创建专有用户
    为了方便起见,我们为每一台电脑创建一个名为gpadmin的用户,和其对应的名为gpadmin的用户组。
    首先,如果电脑上之前存在gpadmin或者gpadmin用户组的话,我们应该先把他们清掉:

    sudo groupdel gpadmin
    sudo userdel gpadmin
    

    然后重新建一个:

    sudo groupadd -g 530 gpadmin
    sudo useradd -g 530 -u 530 -m -d /home/gpadmin -s /bin/bash gpadmin
    

    对文件夹进行赋权,为新用户创建密码:

    sudo chown -R gpadmin:gpadmin /home/gpadmin/
    sudo passwd gpadmin
    

    其他:为其他三台电脑也创建一个用户gpadmin:gpadmin。

    配置地址别名
    可以通过sudo vim /etc/hosts来进行编辑,然后在文件末尾添加如下信息:

    # hosts for greenplum
    192.168.0.200 dw-greenplum-1 mdw
    192.168.2.201 dw-greenplum-2 sdw1
    192.168.0.202 dw-greenplum-3 sdw2
    192.168.0.203 dw-greenplum-4 sdw3
    

    其他:在其他三台电脑上追加 .
    0同样的内容。

    安装ssh服务器
    ubuntu默认并没有安装和开启ssh服务器,因此,我们需要:

    1. 确定安装sshd
      sudo apt-get install openssh-server
    2. 检查防火墙设置,关闭防火墙
      sudo nfw disable
    3. 检验是否成功,运行下面的命令
      ssh localhost

    有的时候虽然成功了,但还是会出现connection refused的问题,这是,需要查看一下sshd进程是否启动。
    运行下面的指令查看是否有sshd进程:
    ps -e | grep ssh
    有时虽然可以看到sshd,但是还是不能连接成功,这是需要重启一下ssh:
    sudo service ssh restart
    然后再次连接。

    其他:对其他三台电脑也同样方法安装ssh服务器。

    配置ssh直接访问
    进行操作之前需要切换用户为gpadmin:gpadmin,毕竟我们接下来的操作是要在gpadmin的权限下进行的:

    su gpadmin
    

    在xiaoyao上执行如下命令来生成唯一密钥(之后将会scp到另外三台电脑上):

    ssh-keygen
    cp ~/.ssh/id_isa.pub ~/.ssh/authorized_keys
    chomd 600 ~/.ssh/authorized_keys
    chmod 700 ~/.ssh/
    

    在其他三台电脑上通过命令:

    scp -r gpadmin@mdw:~/.ssh ~/.ssh
    

    然后ssh配置文件拷贝到本地。

    接下来,便可以通过在任意一台电脑上以gpadmin的身份执行:

    • ssh gpadmin@mdw,
    • ssh gpadmin@sdw1,
    • ssh gpadmin@sdw2,
    • ssh gpadmin@sdw3

    来验证是否可以成功ssh到对方主机并且是免密ssh的了。

  • 相关阅读:
    程序如何调取焦点轮换图的每一张图片
    做一个网站程序的小小感悟
    点击repeater的一个修改事件触发全部repeater每一行的修改事件
    将两个时间组合,结果为2015年4月8日-4月10日
    转 c# 日期函数[string.Format----GetDateTimeFormats]格式 .
    关于后台管理linkbutton按钮几个重要属性的理解
    循环repeater中的每一列,并计算数据和
    上传图片2
    isinstance和issubclass
    类和对象的绑定方法和非绑定方法
  • 原文地址:https://www.cnblogs.com/zifeiy/p/9652957.html
Copyright © 2020-2023  润新知