• 将hive中数据导出到Mysql


    需要安装sqoop

    1)上传sqoop压缩包并解压 sqoop 安装包到指定目录,如:
    $ tar -zxf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt/module/

    2) 在 sqoop 目录下的 conf 目录,重命名配置文件
    $ mv sqoop-env-template.sh sqoop-env.sh

    3) 修改配置文件sqoop-env.sh

    export HADOOP_COMMON_HOME=/opt/module/hadoop-2.7.2
    export HADOOP_MAPRED_HOME=/opt/module/hadoop-2.7.2
    export HIVE_HOME=/opt/module/hive
    export ZOOKEEPER_HOME=/opt/module/zookeeper-3.4.10
    export ZOOCFGDIR=/opt/module/zookeeper-3.4.10
    export HBASE_HOME=/opt/module/hbase


    4)拷贝 jdbc 驱动到 sqoop 的 lib 目录下


    5)验证 Sqoop,在sqoop目录下
    bin/sqoop help

    6)测试 Sqoop 是否能够成功连接数据库(根据自己数据库情况)
    bin/sqoop list-databases --connect jdbc:mysql://node01:3306/ --username root --password 000000

    7)在navicat中建数据库和表


    8)导出到mysql
    bin/sqoop export
    --connect jdbc:mysql://node01:3306/homework
    --username root
    --password hadoop
    --table lingshou_csv
    --num-mappers 1
    --export-dir /user/hive/warehouse/lingshou_csv
    --input-fields-terminated-by ","

  • 相关阅读:
    ES6的let命令
    html5的新标签
    text()和html()的区别,以及val()
    jquery链接多个jquery方法
    jquery实现动画
    jquery的滑动
    jquery实现淡入淡出
    jquery的hide()和show()
    jquery里面的名称冲突解决方法
    写给W小姐的一封信
  • 原文地址:https://www.cnblogs.com/Lizhichengweidashen/p/15355030.html
Copyright © 2020-2023  润新知