• HDFS客户端操作


    客户端的理解

    hdfs的客户端有多种形式:

    1、网页形式

    2、命令行形式

    3、客户端在哪里运行,没有约束,只要运行客户端的机器能够跟hdfs集群联网

    文件的切块大小和存储的副本数量,都是由客户端决定!

    所谓的由客户端决定,是通过配置参数来定的

    hdfs的客户端会读以下两个参数,来决定切块大小、副本数量:

    切块大小的参数: dfs.blocksize

    副本数量的参数: dfs.replication

    上面两个参数应该配置在客户端机器的hadoop目录中的hdfs-site.xml中配置

    <property>

    <name>dfs.blocksize</name>

    <value>64m</value>

    </property>

     

    <property>

    <name>dfs.replication</name>

    <value>2</value>

    </property>

    hdfs客户端的常用操作命令

    1、上传文件到hdfs

    hadoop fs -put /本地文件  /aaa

    2、下载文件到客户端本地磁盘

    hadoop fs -get /hdfs中的路径   /本地磁盘目录

    3、hdfs中创建文件夹

    hadoop fs -mkdir  -p /aaa/xxx

     

     

    4、移动hdfs中的文件(更名)

    hadoop fs -mv /hdfs的路径1  /hdfs的另一个路径2

     

    复制hdfs中的文件到hdfs的另一个目录

    hadoop fs -cp /hdfs路径_1  /hdfs路径_2

     

     

    5、删除hdfs中的文件或文件夹

    hadoop fs -rm -r /aaa

    6、查看hdfs中的文本文件内容

    hadoop fs -cat /demo.txt

    hadoop fs -tail -f /demo.txt

  • 相关阅读:
    GIT和SVN之间的五个基本区别
    nolock的使用
    Net线程足迹 传递参数至线程
    .NET中的三种Timer的区别和用法(转)
    探索并发编程(六)------Java多线程性能优化
    探索并发编程(七)------分布式环境中并发问题
    Lock与synchronized 的区别
    常用EXE文件反编译工具
    Socket原理
    开源的力量(随时更新)
  • 原文地址:https://www.cnblogs.com/djh222/p/11155219.html
Copyright © 2020-2023  润新知