hadoop伪分布配置

2023-10-02 18:13:46 百科 悟空

标题伪分布式模式

Hadoop 可以在单节点上以伪分布式的方式运行,Hadoop 进程以分离的 Java 进程来运行,节点既作为 NameNode 也作为 DataNode,同时,读取的是 HDFS 中的文件。

1.修改配置文件
Hadoop的配置文件位于:/usr/local/hadoop/etc/hadoop/中,伪分布式需要修改2个配置文件 core-site.xml和hdfs-site.xml。Hadoop的配置文件是 xml格式,每个配置以声明property的name和value的方式来实现。
①修改配置文件core-site.xml

**gedit./etc/hadoop/core-site.xml**

修改前的内容:

<configuration> 
</configuration>

修改后:

<configuration>
<property>
<name>hadoop.tmp.dir</name>         
<value>file:/usr/local/hadoop/tmp</value>
<description>Abase for other temporary directories.</description>    
</property> 
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property> 
</configuration>

②修改配置文件hdfs-site.xml]

gedit./etc/hadoop/hdfs-site.xml

修改后:

<configuration>
<property>
<name>hadoop.tmp.dir</name>
<value>file:/usr/local/hadoop/tmp</value>
<description>Abase for other temporary directories.</description>
</property>
<property>
<name>fs.defaultFS</name>         
<value>hdfs://localhost:9000</value>     
</property>
</configuration> 
 

发表评论: