hadoop之hdfs原理详解 Hadoop大数据使用实践

简介:Hadoop是一种分析和处理大数据的软件平台,是Appach开源软件的一个架构,在大量计算机组成的集群当中实现了对于海量的数据进行的分布式计算。Hadoop框架最核心的设计就是HDFS和MapReduce。HDFS为海量的数据提供了存储,则MapReduce为海量的数据提供了计算。

本文将介绍在Hadoop中HDFS的创建新目录的操作过程,详细内容请参考下文。

一、登陆Linux系统

hadoop之hdfs原理详解 Hadoop大数据使用实践(1)

二、查看Hadoop运行状态

执行指令# docker ps -a | grep hadoop查看hadoop的运行状态。如下图

hadoop之hdfs原理详解 Hadoop大数据使用实践(2)

三、HDFS创建新目录

1、进入master容器

执行指令# docker exec -it hadoop-master /bin/bash。如下图

hadoop之hdfs原理详解 Hadoop大数据使用实践(3)

2、查看hadoop版本

执行指令# hadoop version。如下图

hadoop之hdfs原理详解 Hadoop大数据使用实践(4)

3、在HDFS中创建新目录

(1)、目前HDFS根目录的情况为:

hadoop之hdfs原理详解 Hadoop大数据使用实践(5)

(2)、实现目标是在HDFS根目录下创建新的目录new

(3)、为实现目标,执行语句为# hadoop fs –mkdir –p /new

hadoop之hdfs原理详解 Hadoop大数据使用实践(6)

(4)、访问HDFS页面查看

hadoop之hdfs原理详解 Hadoop大数据使用实践(7)

4、在HDFS中删除新目录

如果发现上次新建的目录没有作用,需要删除,可以执行rmr删除该目录。

执行指令# hadoop fs -rmr /new

hadoop之hdfs原理详解 Hadoop大数据使用实践(8)

访问HDFS页面检验如下

hadoop之hdfs原理详解 Hadoop大数据使用实践(9)

四、HDFS常用操作指令

hadoop之hdfs原理详解 Hadoop大数据使用实践(10)

,

免责声明:本文仅代表文章作者的个人观点,与本站无关。其原创性、真实性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容文字的真实性、完整性和原创性本站不作任何保证或承诺,请读者仅作参考,并自行核实相关内容。文章投诉邮箱:anhduc.ph@yahoo.com

    分享
    投诉
    首页