千家信息网

hdfs目录存储最大文件数异常MaxDirectoryItemsExceededException

发表于:2025-02-02 作者:千家信息网编辑
千家信息网最后更新 2025年02月02日,错误信息:org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.protocol.FSLimitException$MaxDirec
千家信息网最后更新 2025年02月02日hdfs目录存储最大文件数异常MaxDirectoryItemsExceededException

错误信息:

org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.protocol.FSLimitException$MaxDirectoryItemsExceededException): The directory item limit of /XXX/XXX/FF is exceeded: limit=1048576 items=1048576

修改hdfs-site.xml文件参数

默认值:1048576

描述:定义一个目录最大的item数,设置为0将会使该检查失效

改动:在2.7.3版本中,必须设置为1~6400000.

dfs.namenode.fs-limits.max-directory-items

6400000


0