如何在节点中分割数据

问题描述 投票:1回答:1

这里我假设我有一个由4个节点组成的集群,并且我的数据量为500GB。然后在具有默认块大小(64Mb)的Hadoop1中,如何将数据块分配给节点,同时我假设复制因子为3。

我的理解:如果我有200Mb数据,则在Hadoop1中使用默认块大小(64Mb),将数据分为4个块64 + 64 + 64 + 8,在四个节点中将出现所有四个块,并且副本。

我添加了一张图片以表示我的理解。如果我的理解是正确的,那么如果不能帮助我理解,它将如何用于500Mb数据。My understanding of HDFS

hadoop bigdata hadoop2
1个回答
0
投票
© www.soinside.com 2019 - 2024. All rights reserved.