CentOS HDFS配置中的日志级别怎么设置

在centos操作系统中设置hdfs（hadoop分布式文件系统）的日志级别，可以通过编辑hadoop的相关配置文件完成。以下是具体操作步骤：

1. 定位到Hadoop的配置目录

Hadoop的配置文件一般存放在$HADOOP_HOME/etc/hadoop路径下。主要涉及的配置文件有：

• core-site.xml
• hdfs-site.xml
• yarn-site.xml
• mapred-site.xml

2. 调整日志输出等级

Hadoop使用log4j.properties文件来控制日志输出级别，该文件通常可在$HADOOP_HOME/etc/hadoop路径中找到。

2.1 编辑log4j.properties文件

使用任意文本编辑工具打开log4j.properties文件，例如执行以下命令：

sudo vi $HADOOP_HOME/etc/hadoop/log4j.properties

2.2 设置日志记录等级

在log4j.properties文件中，寻找如下类似的配置行：

# Set everything to be logged to the console log4j.rootLogger=INFO, console

你可以将INFO更改为其他日志等级，如DEBUG、WARN、Error或FATAL。比如，若希望所有日志以DEBUG级别输出，可修改为：

log4j.rootLogger=DEBUG, console

如果需要对特定包或类调整日志输出等级，可以添加如下格式的配置：

# 设置某个包的日志等级 log4j.logger.org.apache.hadoop.hdfs=DEBUG  # 设置某个类的日志等级 log4j.logger.org.apache.hadoop.hdfs.server.namenode=DEBUG

3. 保存并退出

完成修改后，保存文件并关闭编辑器。

4. 重启Hadoop服务

为了使新的日志配置生效，必须重启Hadoop相关服务。可通过以下命令停止和启动集群服务：

# 停止Hadoop集群 $HADOOP_HOME/sbin/stop-dfs.sh $HADOOP_HOME/sbin/stop-yarn.sh  # 启动Hadoop集群 $HADOOP_HOME/sbin/start-dfs.sh $HADOOP_HOME/sbin/start-yarn.sh

5. 检查日志输出情况

通过查看Hadoop生成的日志文件来确认日志等级是否已成功更改。这些日志文件通常存储在$HADOOP_HOME/logs目录中。例如，可以使用以下命令查看实时日志输出：

tail -f $HADOOP_HOME/logs/hadoop-<username>-namenode-<hostname>.log </hostname></username>

按照上述步骤操作后，即可顺利在centos系统上调整HDFS的日志输出等级。