所选语种没有对应资源,请选择:

本站点使用Cookies,继续浏览表示您同意我们使用Cookies。Cookies和隐私政策>

提示

尊敬的用户,您的IE浏览器版本过低,为获取更好的浏览体验,请升级您的IE浏览器。

升级
案例库

FAQ-FusionInsight平台HDFS数据节点容量显示同物理磁盘容量不一致

发布时间:  2017-09-19  |   浏览次数:  1467  |   下载次数:  33  |   作者:  lWX465728  |   文档编号: EKB1000885330

目录

问题描述

FusionInsight平台HDFS数据节点容量显示同物理磁盘容量不一致,如下图的HDSF界面,物理服务器中配置为9块6.89T盘,计算约为62T,但实际HDFS界面中显示为55.81T。

 

HDFS界面中的可用空间显示

处理过程

存在差异的原因为DataNode有预留空间的概念,以备其他组件如Yarn的NodeManager运行计算时,或者预留升级时使用。目前C60U10版本中DataNode支持通过配置“dfs.datanode.du.reserved”来配置预留磁盘空间大小的绝对值,“dfs.datanode.du.reserved.percentage”来配置预留磁盘空间占总磁盘空间大小的百分比,那样可以基于总的磁盘空间来预留磁盘百分比,来管理DataNode的预留空间。

如果用户同时配置“dfs.datanode.du.reserved.percentage”“dfs.datanode.du.reserved”,则采用这两个参数较大的数值作为DataNode的预留空间大小。

对应修改界面如下图,在C60U10版本中默认以10%的预留百分比来计算。