加入收藏 | 设为首页 | 会员中心 | 我要投稿 湖南网 (https://www.hunanwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 云计算 > 正文

UCloud优刻得US3在海量数据归档存储下的本钱优化实践,使存储成

发布时间:2021-04-25 06:09:28 所属栏目:云计算 来源:互联网
导读:媒介 UCloud优刻得在2020年8月正式宣布了基于US3的全新一代归档存储产物,该产物回收UCloud优刻得全新自研存储架构,相较尺度存储低落近80%存储本钱的同时,与市场同类归档存储产物对比低落近30%的价值。据IDC的猜测,环球年新增数据量到2025年将达175ZB,真

为此我们在IO调治层增进基于硬盘Spin-up、 Spin-down的调治算法。用来低落在高密度机型的冷存储场景下大量硬盘空转的电力挥霍。

UCloud优刻得US3在海量数据归档存储下的本钱优化实践,使存储成

这里整体的调治算法必要思量的身分许多,我们起首按照妨碍域把JBOD中的磁盘分成多少个磁盘组,担保在恰当的EC条带以及JBOD个数下,可以或许容忍磁盘以及JBOD层面的妨碍,之后Spin up-down的操纵都基于磁盘组为单元举办操纵。

同时我们必要思量在满意用户紧张读取需求的同时担保硬盘的Spin up-down次数在必然的范畴之内,这里我们将硬盘行使寿命内的可操纵上下电次数均匀到天天每小时,在算法上担保磁盘的每次Spin up-down会有必然的冷却时刻,而用户的平凡读再通过正常的轮询上电的时刻片内举办读取,这样既可以低落用户的行使本钱也担保了用户数据在硬盘行使方法层面的靠得住性。

除了靠得住性上面的思量,我们也必要担保写入的机能是否可以或许吃满我们的硬件,因为SMR盘以及营业逻辑的非凡性我们的写入包罗之后的Compaction都是大量次序写入,以是我们共同EC条带的巨细担保一个磁盘组的写入数据带宽可以吃满我们整体装备的网卡带宽,这样在机能上就不会有特另外挥霍。

写在最后

UCloud优刻得US3在海量数据归档存储下的本钱优化实践,使存储成

基于上述进步磁盘存储密度以及低落运营本钱(即电费)两个首要方面的计划思量,UCloud优刻得研发了US3归档存储的底层存储引擎(如上图所示),在大幅低落US3归档存储本钱的同时,保障了在归档存储这种恒久冷存储下的数据高靠得住性。

后续UCloud优刻得US3归档存储会继承从各个方面晋升产物的行使体验,譬喻越发便捷自动的数据降冷处理赏罚,越发智能化的低落存储本钱,让用户充实享受UCloud优刻得技能创新带来的价值盈利。还会试探深度归档场景下磁带等其他存储介质的行使,让UCloud优刻得用户不消与伟大的底层硬件举办直接的交互,就能满意海量冷数据存储的需求。

(编辑:湖南网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读