金山云专注于为企业用户提供公有云服务,是海内排名前线的云服务公司,在云盘算火热的中国市场,金山云提供私有云、私有域、公有云服务,以使用便捷、性价比高、服务快速著称云盘算领域,因此也为金山云带泉源源一直的营业订单,已经笼罩到教育、能源、政务、制造业、互联网企业等诸多要害领域。面临快速的营业需求量,金山云每季度甚至每月都需要增添一批服务器知足前端需求,同时随着规模的重大,数据量更是泛起翻倍的增添,怎样最大限度降低大宗数据有用存储爆发的本钱?这一问题成为金山云研发部分重点的思量点。
经由数据的会见统计显示,天天爆发的新数据在1-2个月后有70%会见次数大幅降低,变为冷数据,主要是一些非结构化的数据,如视频、音频、图片、镜像文件等。而文档、表格等结构化数据的会见次数在数月内并没有显着转变,依旧坚持一定热度,以是若是能有用降低70%数据的存储本钱无疑会节约大批的资金,提供的云服务本钱会更有竞争力。面临金山云的数PB甚至ZB的冷数据存储,金山云对IaaS装备提出四个须要要求:
低本钱:每TB存储空间的本钱不高于通俗2U存储的三分之一;
高密度:每节点的存储空间相比之前24盘存储密度提升50%以上;
低功耗:每机柜需要安排8台装备,且正常事情所需电流不凌驾13A;
易维护:所有硬盘需要支持热插拔,替换硬盘不需要断电重启,快速。
要做到真正的降低本钱和功耗,抵达上诉四点要求,需要软件做专门的数据降温处置惩罚,能从海量的数据中区分出冷数据和热数据才可以指向差别的存储路径。在硬件装备层面需要具备冷存储产品低本钱、低功耗、高密度的特点,豪运国际SA5224L4乐成为金山云解决了这一问题。
SA5224L4单节点支持一颗低功耗E3-1200v3系列CPU,36块3.5寸热插拔大容量硬盘,存储密度是通俗24盘机型的1.5倍,由于突出存储弱化盘算,以是整机功耗低,专门冷存储产品。金山云接纳热数据降温手艺后,将2U12盘上的低频率被会见数据在两个月后处置惩罚为冷数据,批量推送到冷存储服务器SA5224L4上并形成副本知足被会见时的实时响应和数据清静性,由此,该部分数据爆发的本钱大幅度降低到缺乏原来的三分之一。
服务器设置
金山云接纳的SA224L4支持一颗E3-1200v3系列CPU,最高32G内存,36块3.5寸大容量硬盘,并支持2块2.5寸OS硬盘,网络方面默认支持四千兆,可选择支持万兆网卡,所有硬盘接纳noRAID模式,彻底阻止了冗余或校验带来的磁盘空间铺张。本次金山云接纳的设置有如下特点:
1、强化存储弱化盘算
接纳E3-1200v3系列中中低端的CPU和32G内存知足营业软件开销,满设置36块4T云盘,单节点存储容量抵达144T,单机柜存储容量抵达1152T,形成了机柜PB级的海量存储资源。
2、数据和OS疏散提升清静性
本次照旧用1块300G 2.5寸SAS盘作为OS硬盘,将营业软件和数据存储硬盘疏散,阻止磁盘损坏对OS和数据都造成影响,提升数据的清静性和节点的稳固性。
3、充分使用存储空间
所有大容量硬盘都毗连到一块2308卡上,实现统一的管理,由于所有数据是凭证漫衍式存储,以是对磁盘接纳noRAID模式,每一块磁盘单独举行读写操作,阻止了RAID爆发的磁盘铺张,将存储空间最大化,同时解决磁盘损坏时因重修数据造成数据不可被会见和回复时间长的问题。
4、低本钱和低功耗
由于接纳专门冷存储设置,以是每TB的本钱大幅度降低到原来的三分之一,每个节点甚至每一块硬盘都可以做到无操作时休眠,将功耗降到最低。
金山云接纳冷数据专门处置惩罚,用诸多个“冰屋”容纳海量的冷数据,整个存储架构变的冷热层级清晰,乐成将存储本钱降低到理想的水平,基于此条件接纳漫衍式,将数据的清静性提升到新的水平。
SA5224L4将存储密度提升50%,在单机柜安排8台的情形下,相比24盘机型,单机柜存储密度增添50%,为客户节约三分之一的机柜,剩下空间租赁用度;
由于低功耗的特征,机柜中磁盘数目增添50%的条件下功耗增添缺乏30%,可以充分使用机柜的剩余电能,将单机柜的配电效能施展到最大,阻止电能空闲,为客户赚取更多的剩余价值,最高可达50%;
每TB的采购本钱是金山云最关注的,由于接纳高密度的设计,其他硬件资源稳固,增添12块大容量磁盘支持,每TB最高可降低13%,采购本钱节约10%以上。仅基于此点,金山云存储营业的本钱获得优化,竞争力进一步提升。