加入收藏 | 设为首页 | 会员中心 | 我要投稿 湖南网 (https://www.hunanwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 教程 > 正文

HDFS你必然要知道,要考的

发布时间:2018-08-26 04:49:31 所属栏目:教程 来源:千锋大数据开发学院
导读:你必定听过Hadoop,对就是那头飞跃的小象。 Hadoop作为大数据期间代表性的办理方案被各人所熟知,它首要包括两部门内容: HDFS漫衍式文件存储 MapReduce分a布式计较框架 前面我们说明存储方案的成长的时辰有提到漫衍式文件存储的呈现是为了办理存储的三大

读流程

HDFS你必然要知道,要考的
  1. HDFS Client与NameNode成立链接,汇报NameNode要读取文件xxx。
  2. NameNode通过查询本身的元数据信息,获得文件xxx的数据块映射信息及存储数据块的DataNode列表。然后将这些信息发送给Client。
  3. Client获得这些信息之后,探求最近可用的DataNode1.取回数据块1.从DataNode2取回数据块2. 自此乐成读取文件xxx
  4. 假如DataNode2呈现题目挂掉了,则从DataNode3举办数据块读取。

文件读取时,NameNode会选择最近的DataNode提供应客户端。

划重点划重点,要考的!!!

【编辑保举】

  1. 干货:怎样将Hadoop存储容量晋升4倍?
  2. Hadoop生态组件Yarn之恒久运行处事支持篇!
  3. Oracle与Hadoop比拟:同等性和高机能不行兼得!
  4. 耗时两个月,海内传统企业对Hadoop到底什么立场?
  5. 扫盲:Hadoop漫衍式文件体系(HDFS)基本观念讲授!
【责任编辑:未丽燕 TEL:(010)68476606】
点赞 0

(编辑:湖南网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读