我们有3个主机,2个卡夫卡和3个工人机器的ambari集群
每个工人有5个磁盘:
/dev/sdb 200G 477M 200G 3% /gr/sdb
/dev/sdc 200G 183M 200G 1% /gr/sdc
/dev/sdd 200G 283M 200G 2% /gr/sdd
/dev/sde 200G 45M 200G 1% /gr/sde
我们想为每个工作机器添加额外的5个磁盘(/ dev / sdf,/ dev / sdh ...等)
remark - 我们的Workers节点同时运行DataNode和NodeManager
现在我明白应该根据新磁盘更新以下参数
dfs.datanode.data.dir ( from HDFS )
yarn.nodemanager.local-dirs ( from YARN )
yarn.nodemanager.log-dirs ( from YARN )
对此,我们错过了其他什么?需要配置?
第二
在我们在ambari GUI中重新配置参数之后,
如何验证ambari集群是否识别工作计算机上的新磁盘?
首先,您需要对磁盘进行分区,然后将它们安装在/etc/fstab
中的目录中。
但这些设置看起来是正确的。
如何验证ambari集群是否识别工作计算机上的新磁盘
如果未装入这些属性列表中的已配置卷,它将发出警报。