这篇文章将为大家详细讲解有关Hadoop中HDFS如何设计,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。
HDFS是Hadoop Distrbition FileSystem 的缩写,分布式文件系统。这种设计的思想是来源于操作系统,整体的来看是也是master/slave的控制方式,设计的用途主要有以下的集中:
硬件要求:
1、当前的文件可以存储到普通的pc硬盘上,就是没有很高的硬件要求;
文件处理的方式:
1、处理较大的文件,较小的文件处理起来不划算;
2、文件是以文件流的形式进行存储,其实就是一次性写入,多次读取的情景;
3、后期的文件可以对已经存在的文件追加写入,前提是单一用户,不能让多用来这么做;
处理的效率:
主要的适用于延迟比较大的数据分析,不适合实时的数据处理;
关于“Hadoop中HDFS如何设计”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。