配置历史服务器

1、在mapred-site.xml中写入一下配置

     
      
       mapreduce.jobhistory.address
      
      
       hadoop101:10020
      
     
     
      
       mapreduce.jobhistory.webapp.address
      
      
       hadoop101:19888
      
     

2、查看启动历史服务器文件目录

　　在Hadoop安装目录中的sbin中有mr-jobhistory-daemon.sh命令

3、启动历史服务器

　　mr-jobhistory-daemon.sh start  historyserver

4、查看历史服务器是否启动

　　jps

　　是否有

　　historymanager进程

5、查看 jobhistory

　　http://192.168.1.101:19888/jobhistory

-----------------------------------------------------------------------------------------

配置日志聚集

1、配置yarn-site.xml文件

     
     
      
       yarn.log-aggregation-enable
      
      
       true
      
     
     
     
      
       yarn.log-aggregation.retain-seconds
      
      
       604800
      
     

2、关闭nodemanager、resourcemanager、historymanager

　　yarn-daemon.sh stop resourcemanager

　　yarn-daemon.sh stop nodemanager

　　mr-jobhistory-daemon.sh stop historyserver

3、启动nodemanager、resourcemanager、historymanager

　　yarn-daemon.sh start resourcemanager

　　yarn-daemon.sh start nodemanager

　　mr-jobhistory-daemon.sh start historyserver