加入收藏 | 设为首页 | 会员中心 | 我要投稿 湖南网 (https://www.hunanwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 教程 > 正文

Hadoop大数据通用处理赏罚平台

发布时间:2019-03-15 07:26:05 所属栏目:教程 来源:Java的小本家
导读:Hadoop是一款开源的大数据通用处理赏罚平台,其提供了漫衍式存储和漫衍式离线计较,得当大局限数据、流式数据(写一次,读多次),不得当低延时的会见、大量的小文件以及频仍修改的文件。 *Hadoop由HDFS、YARN、MapReduce构成。 假如想进修Java工程化、高机能及分

编辑etc/hadoop/hadoop-env.sh文件,修改JAVA_HOME设置项为当地JAVA的HOME目次,此文件是Hadoop启动时加载的情形变量。

编辑/etc/hosts文件,添加主机名与IP的映射相关。

2.设置Hadoop民众属性(core-site.xml)

  1. <configuration>  
  2.  <!-- Hadoop事变目次,用于存放Hadoop运行时发生的姑且数据 -->  
  3.  <property>  
  4.  <name>hadoop.tmp.dir</name>  
  5.  <value>/usr/hadoop/hadoop-2.9.0/data</value>  
  6.  </property>  
  7.  <!-- NameNode的通讯地点,1.x默认9000,2.x可以行使8020 -->  
  8.  <property>  
  9.  <name>fs.default.name</name>  
  10.  <value>hdfs://192.168.1.80:8020</value>  
  11.  </property>  
  12. </configuration> 

3.设置HDFS(hdfs-site.xml)

  1. <configuration>  
  2.  <!--指定block的副本数目(将block复制到集群中备份数-1个节点的DataNode中)-->  
  3.  <property>  
  4.  <name>dfs.replication</name>  
  5.  <value>1</value>  
  6.  </property>  
  7.  <!-- 封锁HDFS的会见权限 -->  
  8.  <property>  
  9.  <name>dfs.permissions.enabled</name>  
  10.  <value>false</value>  
  11.  </property>  
  12. </configuration> 

(编辑:湖南网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读