Hadoop大数据培训:HDFS配额管理
最新学讯:近期OCP认证正在报名中,因考试人员较多请尽快报名获取最近考试时间,报名费用请联系在线老师,甲骨文官方认证,报名从速!
我要咨询Hadoop大数据培训:HDFS配额管理,Hadoop分布式文件系统HDFS允许管理员为每个目录设置配额。新建立的目录是没有配额的,最大的配额是Long.Max_Value。配额为1可以强制目录保持为空。
目录配额是对目录树上该目录下的文件及目录总数进行硬性限制,如果创建文件或目录时超过了配额,该操作会失败;重命名不会改变该目录的配额,如果重命名操作导致违反配额限制,该操作将会失败;如果尝试设置一个配额而现有文件数量已经超出了这个新配额,则设置失败。
配额和fsimage保持一致。当启动时,如果fsimage违反了某个配额限制(也许fsimage被偷偷改变了),则启动失败并生成错误报告。设置或删除一个配额会创建相应的日志记录。
下面的新命令或新选项是用于支持配额的,其中前两个是管理员命令。
Hadoop dfsadmin -setQuota ...
把每个目录配额设为quota。这个命令会在每个目录中尝试,如果quota不是一个正的长整型(long)数值,或者目录不存在,或是文件名不存在,或者目录超过配额,则会发送错误报告。
Hadoop dfsadmin –clrQuota ...
这个命令可以为每个目录删除配额。该命令会在每个目录中尝试,如果目录不存在或是文件名不存在,则会发送错误报告;如果目录原来没有设置配额,则不会报错。
Hadoop fs -count[-q]
在以上命令中使用-q选项,会报告每个目录设置的配额,以及剩余配额。如果目录没有设置配额,会报告none和inf。