Hadoop集群配置

配置hadoop之前，需要在hosts文件中添加主机名和ip地址的映射。例如：

master.hadoop    1.2.3.4

slaver1.hadoop    1.2.3.5

.......

/etc/profile中只需要JAVA_HOME的路径就可以了。没有必要设置HADOOP_HOME变量。否则会报warning，但并不影响运行。

  一、core-site.xml

 

      
          
       
        fs.default.name
            
       
        hdfs://localhost:54310
       
             
      
            
       
        hadoop.tmp.dir
              
       
        /home/hdfs/tmp
       
      

二、hdfs-site.xml

 

      
             
       
        dfs.replication
              
       
        1
        
      

 三、mapred-site.xml

      
             
       
        mapred.job.tracker
             
       
        localhost:9001
       
      

 四、master（仅需在namenode上配置）

master.hadoop

五、slavers（仅需在namenode上配置）

slaver1.hadoop

slaver2.hadoop

附：

一个对配置文件中各个属性的解释：http://blog.csdn.net/yangjl38/article/details/7583374

安装和配置document：http://www.hadooper.cn/dct/page/65672