訂閱
糾錯
加入自媒體

大數(shù)據(jù)時代,西部數(shù)據(jù)的應(yīng)對之道:創(chuàng)新存儲架構(gòu)

2021-04-23 17:04
來源: 粵訊

在日前于IPF2021浪潮數(shù)據(jù)中心合作伙伴大會期間舉辦的數(shù)據(jù)存儲論壇上,西部數(shù)據(jù)公司副總裁兼中國區(qū)業(yè)務(wù)總經(jīng)理劉鋼做了題為“創(chuàng)新存儲架構(gòu),賦能智算浪潮”的主題演講,闡釋了西部數(shù)據(jù)公司在大數(shù)據(jù)時代的存儲應(yīng)對之道。

image.png

西部數(shù)據(jù)公司副總裁兼中國區(qū)業(yè)務(wù)總經(jīng)理劉鋼

大數(shù)據(jù)時代存儲面臨挑戰(zhàn)

在如今的數(shù)字經(jīng)濟時代,數(shù)據(jù)作為企業(yè)的寶貴資產(chǎn),已經(jīng)成為驅(qū)動企業(yè)發(fā)展的核心生產(chǎn)力要素。伴隨以人工智能、物聯(lián)網(wǎng)、5G等為代表的數(shù)字技術(shù)的不斷發(fā)展和落地,其帶來的是數(shù)據(jù)量級的激烈增長。事實上,對于企業(yè)用戶而言,要存儲這些寶貴資產(chǎn)也面臨著極大挑戰(zhàn)。

劉鋼在演講中談到,如今數(shù)據(jù)的來源并不僅僅是人,也包含了成千上萬的機器設(shè)備,以及數(shù)據(jù)中心所產(chǎn)生的數(shù)據(jù)。而次生數(shù)據(jù)的放大效應(yīng)也會產(chǎn)生更巨量的數(shù)據(jù)。在未來幾年中,這些新增數(shù)據(jù)量加在一起會達到驚人的3ZB。

而即便數(shù)據(jù)增長如此快速,但最終也只有1.5%的數(shù)據(jù)被存儲下來。因為對于數(shù)據(jù)存儲而言,企業(yè)用戶既存在海量的存儲需求,也存在快速訪問尋求,同時也對于存儲的成本和功耗提出更高的要求。

西部數(shù)據(jù)的應(yīng)對之道:創(chuàng)新存儲架構(gòu)

當前數(shù)據(jù)存放的關(guān)鍵技術(shù)基本可分為兩種,其一是HDD,用于存放大數(shù)據(jù);其二是SSD,對應(yīng)著快數(shù)據(jù)的存放。劉鋼表示,為了應(yīng)對大數(shù)據(jù)時代的上述問題及挑戰(zhàn),僅憑一種存儲技術(shù)顯然難以做到。西部數(shù)據(jù)所做的是對存儲架構(gòu)進行創(chuàng)新。

由于數(shù)據(jù)對于存儲的需求并不相同,有著不同的分層。而無論是SSD還是HDD,當對數(shù)據(jù)進行分區(qū),其在存儲盤中引發(fā)的效應(yīng)就會增強。在西部數(shù)據(jù)看來,創(chuàng)新的存儲架構(gòu)包括三種:

第一種存儲架構(gòu)是分布式存儲。相對于傳統(tǒng)中心化的存儲方法WEB2.0,WEB3.0是去中心化的分布式存儲方法。去中心化帶來新的存儲架構(gòu),同時也帶來了存儲在成本和容量方面的優(yōu)勢。

第二種存儲架構(gòu)是分層存儲。數(shù)據(jù)分為不同層,根據(jù)數(shù)據(jù)對于存儲的容量、時延等指標的需求,西部數(shù)據(jù)將其分為極熱存儲、熱存儲、溫存儲、冷存儲和極冷存儲五層。不同的數(shù)據(jù)需求需要對應(yīng)不同的存儲設(shè)備。

image.png

例如冷存儲大容量盤可達到18TB,極冷存儲則可引入多次讀取等技術(shù);而在快存儲中,用戶希望快速訪問高價值數(shù)據(jù),進行業(yè)務(wù)的預(yù)測或決策等,因此可以應(yīng)用SSD解決。

值得一提的是,尤其是對于互聯(lián)網(wǎng)領(lǐng)域云存儲而言,HDD容量密度的提升可以降低整體數(shù)據(jù)中心的部署及運營成本。比如在配置不變的前提下,將HDD密度從14TB提升至18TB,則可以降低22%的服務(wù)器使用,單位功耗則會降低21%。因此,許多特別是互聯(lián)網(wǎng)服務(wù)商多會快速跟進最新的存儲容量。

第三種存儲架構(gòu)是分區(qū)存儲。SSD中往往會設(shè)有一個預(yù)留空間(7.68TB為7%,6.4TB為28%),其很多時候會進行數(shù)據(jù)垃圾的收集。而在ZNS SSD中,預(yù)留空間容量為零,但采用了新的技術(shù)進行分區(qū)處理。ZNS SSD帶來的一大好處是,垃圾數(shù)據(jù)收集時并沒有拉低整體存儲的性能,同時也降低了成本。

在美國健康數(shù)據(jù)管理服務(wù)商Qumulo應(yīng)用案例中,其采用西部數(shù)據(jù)Ultrastar SN640 7.68TB NVMe SSD之后,每日可讀取和分析高達2PB的數(shù)據(jù),數(shù)據(jù)分析量提升20倍,極大推進了疫苗開發(fā)工作以及對疫情的控制。

另外,IPFS通過采用(4U60+18T) 相比傳統(tǒng)存儲方案(4U36+16T)讓機柜空間減少46%,電源功耗降低36%,實現(xiàn)TCO成本的降低。

西部數(shù)據(jù)的三大優(yōu)勢

應(yīng)該說,在企業(yè)用戶的數(shù)據(jù)存儲中,SSD對于用戶整體存儲的成本和性能的影響至關(guān)重要。而對于SSD供應(yīng)商而言,要極大降低SSD成本,擁有自己的大規(guī)模產(chǎn)能非常重要。

會上,劉鋼強調(diào)了西部數(shù)據(jù)在SSD領(lǐng)域擁有的三大核心優(yōu)勢:

第一, 西部數(shù)據(jù)擁有全球領(lǐng)先的SSD產(chǎn)能優(yōu)勢。在這方面,西部數(shù)據(jù)與鎧俠可以占到全球產(chǎn)能三分之一的份額。

第二, 西部數(shù)據(jù)擁有領(lǐng)先的SSD技術(shù)優(yōu)勢。今年2月,西部數(shù)據(jù)發(fā)布了最新第六代162層3D閃存技術(shù)。其橫向單元陣列密度較上一代技術(shù)提高了約10%;與112層堆疊技術(shù)相比,第六代技術(shù)將晶圓尺寸有效減小40%,大大優(yōu)化成本;與上一代產(chǎn)品相比,第六代程序性能提升2.4倍,讀取延遲降低約10%,I/O性能提高約66%。

第三, 西部數(shù)據(jù)擁有垂直企業(yè)級固態(tài)硬盤縱向集成優(yōu)勢。例如在全球最大電商之一應(yīng)用案例中,其對于穩(wěn)定性的要求是上下10%波動,而西部數(shù)據(jù)相應(yīng)方案的實測波動僅為0.11%。

除了全球市場,西部數(shù)據(jù)也與中國企業(yè)巨頭保持了緊密的合作。比如西部數(shù)據(jù)與浪潮一直存在非常多的合作。

劉鋼表示,在面臨大數(shù)據(jù)時代挑戰(zhàn)時,應(yīng)對之道是創(chuàng)新的存儲架構(gòu),包括分布式存儲、分層存儲和分區(qū)存儲。西部數(shù)據(jù)不僅提供新的技術(shù)來不斷創(chuàng)新和優(yōu)化存儲產(chǎn)品及解決方案,也會攜手合作伙伴共同創(chuàng)新企業(yè)級存儲市場的未來。

image.png

西部數(shù)據(jù)公司副總裁兼中國區(qū)業(yè)務(wù)總經(jīng)理劉鋼

“高速發(fā)展的人工智能在對數(shù)字經(jīng)濟產(chǎn)生巨大賦能和推動的同時,也推動整個計算產(chǎn)業(yè)向'智慧計算'方向演進,巨量模型和海量數(shù)據(jù),對算力和存儲的需求呈指數(shù)級增長。我們很高興能持續(xù)深化與浪潮的合作,結(jié)合雙方前沿科技與產(chǎn)品的獨特優(yōu)勢,協(xié)力打造出高性能、低成本、且兼具穩(wěn)定性與擴展性等特點的卓越解決方案,優(yōu)化資源配置,賦能智慧計算。未來,西部數(shù)據(jù)將與浪潮加強縱深合作,不斷以創(chuàng)新的數(shù)據(jù)存儲架構(gòu)和解決方案,應(yīng)對市場多樣化的需求,并攜手生態(tài)系統(tǒng)中的各方伙伴共同推動智能產(chǎn)業(yè)的轉(zhuǎn)型與發(fā)展,為行業(yè)用戶創(chuàng)造更多價值。”劉鋼如是說。

聲明: 本文系OFweek根據(jù)授權(quán)轉(zhuǎn)載自其它媒體或授權(quán)刊載,目的在于信息傳遞,并不代表本站贊同其觀點和對其真實性負責,如有新聞稿件和圖片作品的內(nèi)容、版權(quán)以及其它問題的,請聯(lián)系我們。

發(fā)表評論

0條評論,0人參與

請輸入評論內(nèi)容...

請輸入評論/評論長度6~500個字

您提交的評論過于頻繁,請輸入驗證碼繼續(xù)

暫無評論

暫無評論

    掃碼關(guān)注公眾號
    OFweek人工智能網(wǎng)
    獲取更多精彩內(nèi)容
    文章糾錯
    x
    *文字標題:
    *糾錯內(nèi)容:
    聯(lián)系郵箱:
    *驗 證 碼:

    粵公網(wǎng)安備 44030502002758號