должен обладать свойствами для основного сайта hdfs-сайта mapred-site и yarn-site.xml

Question

Может кто-нибудь, пожалуйста, дайте мне знать, что у вас должны быть свойства для Core-site.xml, hdfs-site.xml, mapred-site.xml и нить-site.xml, без которой хаос не может начаться?

Answer 1

Ниже приведены настройки для Hadoop 2.x.x для автономной и псевдоузелной настройки.

ядро-site.xml

<configuration> 
<property> 
    <name>fs.default.name</name> 
    <value>hdfs://localhost:9000</value> 
</property> 
</configuration> 

HDFS-site.xml

<configuration> 
<property> 
<name>dfs.replication</name> 
<value>1</value> 
</property> 

<property> 
    <name>dfs.name.dir</name> 
    <value>file:///home/hadoop/hadoopdata/hdfs/namenode</value> 
</property> 

<property> 
    <name>dfs.data.dir</name> 
    <value>file:///home/hadoop/hadoopdata/hdfs/datanode</value> 
</property> 
</configuration> 

mapred-site.xml

<configuration> 
<property> 
    <name>mapreduce.framework.name</name> 
    <value>yarn</value> 
</property> 
</configuration> 

пряжи site.xml

<configuration> 
<property> 
    <name>yarn.nodemanager.aux-services</name> 
    <value>mapreduce_shuffle</value> 
</property> 
</configuration> 

также ссылается на документацию apache hadoop для single node setup