加入收藏 | 设为首页 | 会员中心 | 我要投稿 湖南网 (https://www.hunanwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 教程 > 正文

高机能计较常识:深度理会Lustre系统布局

发布时间:2018-07-04 19:59:44 所属栏目:教程 来源:米搓
导读:【资讯】Lustre架构是一种集群存储系统布局,其焦点组件就是Lustre文件体系。该文件体系可在Linux操纵体系上运行,并提供了切合POSIX尺度的UNIX文件体系接口。 Lustre文件体系是什么 Lustre架构用于很多差异种类的集群。众所周知,它处事于很多环球最大的

  Lustre文件体系高机能的首要缘故起因之一是可以或许以轮询方法跨多个OST将数据条带化。用户可按照必要为每个文件设置条带数目,条带巨细和OST。当单个文件的总带宽高出单个OST的带宽时,可以行使条带化来进步机能。同时,当单个OST没有足够的可用空间来容纳整个文件时,条带化也能施展它的浸染。

  如图下图所示,条带化应承将文件中的数据段或“块”存储在差异的OST中。在Lustre文件体系中,通过RAID 0模式将数据在必然数目的工具长举办条带化。一个文件中处理赏罚的工具数称为stripe_count。每个工具包括文件中的一个数据块,当写入特定工具的数据块高出stripe_size时,文件中的下一个数据块将存储在下一个工具上。stripe_count和stripe_size的默认值由为文件体系配置的,个中,stripe_count为1,stripe_size为1MB。用户可以在每个目次或每个文件上变动这些值。

  下图中,文件C的stripe_size大于文件A的stripe_size,表白更多的数据被应承存储在文件C的单个条带中。文件A的stripe_count为3,则数据在三个工具上条带化。文件B和文件C的stripe_count是1。OST上没有为未写入的数据预留空间。

  高机能计较常识: 深度理会Lustre系统布局

  最大文件巨细不受单个方针巨细的限定。在Lustre文件体系中,文件可以超过多个工具(最多2000个)举办支解,每个工具可行使多达16 TB的ldiskfs,多达256PB的ZFS。也就是说,ldiskfs的最大文件巨细为31.25 PB,ZFS的最大文件巨细为8EB。Lustre文件体系上的文件巨细受且仅受OST上可用空间的限定,Lustre最大可支持2 ^ 63字节(8EB)的文件。

  留意: Lustre 2.2之前,单个文件的最大条带数为160个OST。尽量一个文件只能被支解成2000个以上的工具,可是Lustre文件体系可以稀有千个。

(编辑:湖南网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读