通常,Hadoop集群安装之后,其中一台机器会被指定为NameNode,另一台机器指定为ResourceManager,它们属于masters。

集群中的其他机器则充当DataNode和NodeManager,它们是slaves。

配置

Hadoop的配置文件主要分为两类:

  • 只读的默认配置:core-default.xml,hdfs-default.xml,yarn-default.xml,mapred-default.xml

  • Site相关配置:conf/core-site.xml,conf/hdfs-site.xml,conf/yarn-site.xml,conf/mapred-site.xml

除此之外,可以通过配置site相关的配置,比如conf/hadoop-env.sh和yarn-env.sh控制bin/目录中的hadoop脚本。

results matching ""

    No results matching ""