Hadoop 03：启动YARN

hadoop
hadoop

介绍YARN的启动。

  1. 启动ResourceManager

    1
    # sbin/yarn-daemon.sh start resourcemanager

  2. 启动NodeManager

    1
    # sbin/yarn-daemon.sh start nodemanager

  3. 访问http://hadoop.o.cn:8088/cluster，可查看YARN状态

  4. 访问http://hadoop.o.cn:8088/logs，可查看YARN日志

  5. 运行案例

    1
    # bin/yarn jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.8.0.jar pi 5 20  // Map=5 样本=20

  6. 访问http://hadoop.o.cn:8088/cluster，-> Applications 可以看到运行统计

  7. Job Id分配原则：job_年月日时分_job序列号，序列号从0开始，上限为1000
  8. Task Id分配原则：
    • job_年月日时分_job序列号_task序列号_m ，m代表map task slot
    • job_年月日时分_job序列号_task序列号_r，r代表reduce task slot
    • task序列号从0开始，上限为1000
  9. 启动历史服务器
    1
    # sbin/mr-jobhistory-daemon.sh start historyserver

访问http://hadoop.o.cn:8088/cluster，点击任务后的history，
跳转http://hadoop.o.cn:19888/jobhistory/job/job_1491481769386_0001， 可查看运行历史。

分享到