千家信息网

Hadoop中HDFS如何设计

发表于:2024-10-12 作者:千家信息网编辑
千家信息网最后更新 2024年10月12日,这篇文章将为大家详细讲解有关Hadoop中HDFS如何设计,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。HDFS是Hadoop Distrbition FileSy
千家信息网最后更新 2024年10月12日Hadoop中HDFS如何设计

这篇文章将为大家详细讲解有关Hadoop中HDFS如何设计,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。

HDFS是Hadoop Distrbition FileSystem 的缩写,分布式文件系统。这种设计的思想是来源于操作系统,整体的来看是也是master/slave的控制方式,设计的用途主要有以下的集中:

硬件要求:
1、当前的文件可以存储到普通的pc硬盘上,就是没有很高的硬件要求;

文件处理的方式:
1、处理较大的文件,较小的文件处理起来不划算;
2、文件是以文件流的形式进行存储,其实就是一次性写入,多次读取的情景;
3、后期的文件可以对已经存在的文件追加写入,前提是单一用户,不能让多用来这么做;

处理的效率:
主要的适用于延迟比较大的数据分析,不适合实时的数据处理;

关于"Hadoop中HDFS如何设计"这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。

0