西部數(shù)據(jù)為ZB時(shí)代存儲(chǔ)核心架構(gòu)帶來(lái)變革
掃描二維碼
隨時(shí)隨地手機(jī)看文章
·數(shù)據(jù)爆發(fā) 全球進(jìn)入ZB時(shí)代
現(xiàn)在每一年人類所創(chuàng)造的數(shù)據(jù)總量都相當(dāng)過(guò)去人類歷史中產(chǎn)生數(shù)據(jù)的總和。根據(jù)預(yù)測(cè),2023年人類數(shù)據(jù)的產(chǎn)生將會(huì)超過(guò)100個(gè)ZB。隨著數(shù)字化、信息化的快速發(fā)展,數(shù)據(jù)中心作為科技創(chuàng)新和技術(shù)應(yīng)用的載體,支撐著云計(jì)算、大數(shù)據(jù)、人工智能、工業(yè)互聯(lián)網(wǎng)等新技術(shù)、新應(yīng)用的快速發(fā)展和落地,成為了推動(dòng)我國(guó)經(jīng)濟(jì)轉(zhuǎn)型升級(jí)和培育新動(dòng)能的重要力量。

西部數(shù)據(jù)公司產(chǎn)品市場(chǎng)部副總裁朱海翔
9月3日-4日,ODCC 2019開(kāi)放數(shù)據(jù)中心峰會(huì)在北京國(guó)際會(huì)議中心舉行。存儲(chǔ)系統(tǒng)架構(gòu)作為數(shù)據(jù)的“容器”,至關(guān)重要。西部數(shù)據(jù)產(chǎn)品市場(chǎng)部副總裁朱海翔,進(jìn)行了題為《ZB時(shí)代的數(shù)據(jù)存儲(chǔ)核心架構(gòu)-機(jī)遇,挑戰(zhàn)和階段》的主題演講。

朱海翔提到,“數(shù)據(jù)中心的存儲(chǔ)量呈現(xiàn)出爆發(fā)式增長(zhǎng),尤其是從計(jì)算的角度來(lái)看,負(fù)載應(yīng)用變得更有特征化,通用計(jì)算已經(jīng)不是最佳化的選擇。但存儲(chǔ)技術(shù)的基礎(chǔ)架構(gòu)仍然沒(méi)有真正得到改變,大多只是接口、速度、協(xié)議的改變。我們有必要重新審視當(dāng)今的存儲(chǔ)架構(gòu)能不能滿足數(shù)據(jù)中心的發(fā)展需求。”
“數(shù)據(jù)產(chǎn)生的時(shí)候,我們往往還不能意識(shí)到它的價(jià)值,如何把產(chǎn)生的數(shù)據(jù)有效留存下來(lái),更好的發(fā)掘出數(shù)據(jù)的價(jià)值是非常重要的。目前的存儲(chǔ)架構(gòu)、存儲(chǔ)介質(zhì)和存儲(chǔ)密度都存在巨大的挑戰(zhàn)。針對(duì)于此,我們需要考慮推出一個(gè)專用的架構(gòu),從數(shù)據(jù)管理、存儲(chǔ)系統(tǒng)、SSD等方面構(gòu)建下一代數(shù)據(jù)中心的存儲(chǔ)架構(gòu)。”
·大規(guī)模數(shù)據(jù)中心對(duì)于SSD的需求強(qiáng)勁
目前數(shù)據(jù)中心使用的主要存儲(chǔ)介質(zhì)以HDD為主,雖然SSD的增長(zhǎng)速率最快,但在以后的3-5年,企業(yè)級(jí)HDD存儲(chǔ)也將保持超過(guò)30%的高速增長(zhǎng)。到2023年,絕大多數(shù)數(shù)據(jù)中心的數(shù)據(jù)還是會(huì)存儲(chǔ)于HDD當(dāng)中。作為世界級(jí)存儲(chǔ)巨頭,西部數(shù)據(jù)公司擁有完整的存儲(chǔ)產(chǎn)業(yè)鏈解決方案,不論是在HDD方面,還是在閃存方面,都有深厚的技術(shù)積累。

西部數(shù)據(jù)的3D NAND從24層發(fā)展到現(xiàn)在的96層,幾乎每隔15個(gè)月就能實(shí)現(xiàn)一次迭代。閃存產(chǎn)品從SLC、MLC,再到TLC,實(shí)現(xiàn)了非??捎^的存儲(chǔ)密度擴(kuò)展。而每個(gè)Cell單元可儲(chǔ)存4個(gè)數(shù)據(jù)的QLC更是實(shí)現(xiàn)了存儲(chǔ)密度的進(jìn)一步擴(kuò)展。西部數(shù)據(jù)預(yù)計(jì),2025年左右全球數(shù)據(jù)中心中存放在SSD的介質(zhì)會(huì)有50%的數(shù)據(jù)使用基于QLC的SSD,西部數(shù)據(jù)所做的正是通過(guò)一些技術(shù)創(chuàng)新,加速Q(mào)LC在數(shù)據(jù)中心中的規(guī)模部署。

西部數(shù)據(jù)Ultrastar DC SN630 NVMe SSD獲得ODCC 2019年度SSD(綜合性能)獎(jiǎng)項(xiàng)
本次ODCC展會(huì),西部數(shù)據(jù)Ultrastar DC SN630獲得了年度SSD產(chǎn)品獎(jiǎng)。這款針對(duì)云存儲(chǔ)進(jìn)行優(yōu)化處理的2.5英寸小型企業(yè)級(jí)NVMe SSD,與傳統(tǒng)SATA硬盤(pán)相比,在處理多重工作負(fù)載時(shí)可實(shí)現(xiàn)超過(guò)3倍的IOPS。Ultrastar DC SN630 SSD使云架構(gòu)工作者能提高延遲敏感型工作負(fù)載的性能,同時(shí)確保出色的服務(wù)質(zhì)量。

另外,西部數(shù)據(jù)在HDD領(lǐng)域推出了SMR(疊瓦式磁記錄)產(chǎn)品,通過(guò)堆疊的方式,可以在同樣的磁片上重新更多的存儲(chǔ)將近15-20%的數(shù)據(jù)。這對(duì)于數(shù)據(jù)中心的意義不言而喻。
本次ODCC峰會(huì)上,西部數(shù)據(jù)展示了高達(dá)20TB的Ultrastar HDD,該產(chǎn)品預(yù)計(jì)將于2020年出貨。據(jù)西部數(shù)據(jù)估計(jì),到2022年,西部數(shù)據(jù)交付的HDD容量中至少有50%將由SMR存儲(chǔ)介質(zhì)提供,并且越來(lái)越多的云服務(wù)提供商正在投入資源逐步優(yōu)化高容量SMR HDD的主機(jī)應(yīng)用和管理軟件,以便協(xié)助大體量客戶實(shí)現(xiàn)更好的總體擁有成本。
·分區(qū)存儲(chǔ)技術(shù) 助力全行業(yè)共同發(fā)展
ZB數(shù)據(jù)時(shí)代,在下一代的數(shù)據(jù)中心當(dāng)中,迫切需要重新架構(gòu)一種全新的存儲(chǔ)數(shù)據(jù)架構(gòu),以適應(yīng)新型的計(jì)算技術(shù),滿足更多應(yīng)用需求。除了在存儲(chǔ)硬件方面所做出的努力,今年6月,西部數(shù)據(jù)還推出了基于軟件定義的存儲(chǔ)分區(qū)技術(shù)。

這套新的存儲(chǔ)技術(shù)方案不僅包含了開(kāi)源工具和文件系統(tǒng)支持,還包括了前面所說(shuō)的SMR超大容量HDD以及ZNS NVMe SSD開(kāi)發(fā)平臺(tái)。旨在為云和超大規(guī)模數(shù)據(jù)中心架構(gòu)師融合創(chuàng)新與行業(yè)標(biāo)準(zhǔn),從而設(shè)計(jì)出高效的存儲(chǔ)層,幫助用戶在ZB級(jí)容量的存儲(chǔ)時(shí)代保持具有競(jìng)爭(zhēng)力的總體擁有成本,實(shí)現(xiàn)更大的規(guī)模效益。

西部數(shù)據(jù)和NVMe標(biāo)準(zhǔn)化組織合作,推出了ZNS(分區(qū)命名空間),這也是對(duì)SMR技術(shù)的補(bǔ)充;它可以讓內(nèi)核應(yīng)用開(kāi)發(fā)人員在共同的軟件棧系統(tǒng)中無(wú)需再留意辨別存儲(chǔ)介質(zhì)類型,同時(shí)充分的調(diào)用SMR和ZNS介質(zhì)的存儲(chǔ)空間。從功能的角度,ZNS SSD可以與計(jì)算資源更好的匹配,在每一個(gè)分區(qū)命名空間的每一個(gè)小區(qū)域內(nèi)可以建立一對(duì)一和一對(duì)多的對(duì)應(yīng)。原來(lái)HDD和SSD中的寫(xiě)入限制,通過(guò)分區(qū)存儲(chǔ)技術(shù),可以變成寫(xiě)入管理,實(shí)現(xiàn)更加可靠可控的數(shù)據(jù)協(xié)同。

為了能夠更好的配合數(shù)據(jù)中心中不同的負(fù)載(包括機(jī)器數(shù)據(jù)的順序化寫(xiě)入、人工智能的超高讀取性能要求等)對(duì)于分區(qū)存儲(chǔ)技術(shù)的應(yīng)用,西部數(shù)據(jù)推出了ZNS NVMe SSD應(yīng)用開(kāi)發(fā)平臺(tái),以推動(dòng)它在數(shù)據(jù)中心中更廣泛地應(yīng)用。同時(shí)為了更好地?fù)肀ч_(kāi)源、擁抱標(biāo)準(zhǔn)化,西部數(shù)據(jù)還和各個(gè)生態(tài)系統(tǒng)伙伴一起合作,對(duì)此項(xiàng)技術(shù)進(jìn)行了開(kāi)源,最主要的開(kāi)發(fā)工具、數(shù)據(jù)庫(kù)和相關(guān)的命令集庫(kù),都公布在開(kāi)源社區(qū)網(wǎng)站Zonedstorage.io,幫助數(shù)據(jù)中心基礎(chǔ)架構(gòu)工程師更好的利用分區(qū)存儲(chǔ)技術(shù)。

作為一個(gè)專注存儲(chǔ)的公司,面對(duì)即將到來(lái)的ZB數(shù)據(jù)時(shí)代,西部數(shù)據(jù)重新審視存儲(chǔ)的核心架構(gòu),以SMR和ZNS等技術(shù)創(chuàng)新,通過(guò)提供智能化應(yīng)用架構(gòu)滿足數(shù)據(jù)中心對(duì)于存儲(chǔ)介質(zhì)的需求,從根本上重塑數(shù)據(jù)中心,將數(shù)據(jù)推向下一個(gè)時(shí)代。