背景:大海里,魚類可以毫不費(fèi)力地做到兼具速度與優(yōu)雅于一身,最快游速達(dá)每小時(shí) 70 英里,而人類甚至難以達(dá)到每小時(shí) 4 英里,即便潛艇也只能達(dá)到每小時(shí) 50 英里。魚類為何能獲得如此快的速度,這個(gè)問題令物理學(xué)家、生物學(xué)家和工程師們著迷;如今面對(duì)“數(shù)據(jù)密集型”新范式,為了幫助企業(yè)在數(shù)據(jù)海洋里游出加速度,各家存儲(chǔ)廠商也紛紛放出大招。
真實(shí)海洋里,魚類的高速游動(dòng)涉及到復(fù)雜的3D流體動(dòng)力作用
在數(shù)據(jù)“海洋”,浪潮面對(duì)數(shù)據(jù)密集型新范式帶來的性能挑戰(zhàn)提出應(yīng)對(duì)策略
圖片來源:麻省理工科技評(píng)論
正文:
7月28日,2022全球閃存峰會(huì)線上召開,匯聚了國內(nèi)外專家學(xué)者,共同論道全球閃存與存儲(chǔ)半導(dǎo)體產(chǎn)業(yè)發(fā)展趨勢(shì)。浪潮信息存儲(chǔ)產(chǎn)品線副總經(jīng)理李博樂表示,隨著云、大數(shù)據(jù)、AI等新技術(shù)快速發(fā)展,數(shù)據(jù)成為數(shù)字經(jīng)濟(jì)時(shí)代的關(guān)鍵要素和核心引擎。浪潮存儲(chǔ)的使命是秉承浪潮信息智慧計(jì)算戰(zhàn)略,為企業(yè)構(gòu)建以存儲(chǔ)平臺(tái)為核心的業(yè)界領(lǐng)先的數(shù)據(jù)基礎(chǔ)設(shè)施,基于盤控協(xié)同充分釋放閃存力量。
浪潮信息存儲(chǔ)產(chǎn)品線副總經(jīng)理 李博樂
數(shù)據(jù)密集型新范式 考驗(yàn)數(shù)據(jù)處理能力
模擬腦神經(jīng)網(wǎng)絡(luò),探索人腦上千億個(gè)神經(jīng)元之間是如何連接與工作的,帶來每秒百TB級(jí)數(shù)據(jù)高吞吐量;1000輛自動(dòng)駕駛汽車每天產(chǎn)生數(shù)十PB的實(shí)時(shí)數(shù)據(jù),用來訓(xùn)練AI視覺識(shí)別算法;油氣勘探,一次三維勘探會(huì)產(chǎn)生PB級(jí)原始實(shí)時(shí)數(shù)據(jù),后期數(shù)據(jù)分析和處理中還會(huì)生成15倍體量的次生數(shù)據(jù)……
數(shù)字經(jīng)濟(jì)時(shí)代,在“數(shù)據(jù)密集型”的新范式驅(qū)動(dòng)下,傳統(tǒng)數(shù)據(jù)中心正在向云化數(shù)據(jù)中心快速演進(jìn)。這是因?yàn)樵趥鹘y(tǒng)數(shù)據(jù)中心中,應(yīng)用與基礎(chǔ)設(shè)施緊耦合,IT架構(gòu)呈現(xiàn)孤島狀,數(shù)據(jù)不流動(dòng)、不共享,如同一潭死水。而在云化數(shù)據(jù)中心中,計(jì)算資源實(shí)現(xiàn)了虛擬化,信息孤島被打通,涓涓數(shù)據(jù)河流匯聚成汪洋大海,各個(gè)行業(yè)可以基于海量數(shù)據(jù)間的相關(guān)性分析加速業(yè)務(wù)創(chuàng)新,創(chuàng)造新商業(yè)、新業(yè)態(tài)。
例如,在當(dāng)前非常熱門的類腦科學(xué)研究,有一個(gè)重要的方向就是多模態(tài)多尺度數(shù)據(jù)分析理論與應(yīng)用。首先建立腦成像中心,全套磁共振成像設(shè)備對(duì)小動(dòng)物或者人體進(jìn)行腦成像,不斷采集和分析腦科學(xué)數(shù)據(jù),構(gòu)建起多模態(tài)多尺度腦數(shù)據(jù)庫;然后,再利用模式識(shí)別、深度學(xué)習(xí)等類腦智能方法尋找基因、腦影像和認(rèn)知功能的診斷指標(biāo),以揭示腦疾病致病機(jī)制、提升腦疾病臨床診斷以及藥物療效評(píng)估的準(zhǔn)確性和效率。這個(gè)例子只是冰山一角,“數(shù)據(jù)密集型”新范式已經(jīng)成為驅(qū)動(dòng)各行各業(yè)創(chuàng)新型發(fā)展、高質(zhì)量增長(zhǎng)的加速器。
然而,正如硬幣的AB面,數(shù)據(jù)密集型新范式、數(shù)據(jù)中心云化在為大數(shù)據(jù)挖掘帶來利好的同時(shí),也使得數(shù)據(jù)基礎(chǔ)設(shè)施需要面對(duì)海量的客戶端、應(yīng)用,爆炸式增長(zhǎng)的海量多模態(tài)數(shù)據(jù),對(duì)數(shù)據(jù)基礎(chǔ)設(shè)施的處理能力提出了更高要求。
以盤控協(xié)同為核心 釋放閃存潛能
面對(duì)海量新數(shù)據(jù)、新應(yīng)用挑戰(zhàn),浪潮存儲(chǔ)如何釋放閃存的性能呢?對(duì)此,李博樂表示,浪潮提出新存儲(chǔ)之道,堅(jiān)持存儲(chǔ)即平臺(tái)理念,以盤控協(xié)同策略為核心,充分發(fā)揮閃存性能,打造極致性價(jià)比。
浪潮存儲(chǔ)
首先,存儲(chǔ)系統(tǒng)要想發(fā)揮出閃存的性能,需要闖過三道關(guān)。第一,隨著NAND介質(zhì)、NVMe協(xié)議、SCM等新介質(zhì)的出現(xiàn),存儲(chǔ)系統(tǒng)性能的瓶頸已經(jīng)不在盤上,而在于軟件棧,要想用好性能較高的閃存盤,就需要優(yōu)化存儲(chǔ)系統(tǒng)軟件棧,解決系統(tǒng)性能瓶頸。第二,過去的若干年CPU的發(fā)展一直遵循摩爾定律,性能飛躍式發(fā)展,但最近幾年,CPU性能的發(fā)展進(jìn)入瓶頸期,性能提升緩慢,如果想進(jìn)一步提升存儲(chǔ)系統(tǒng)性能,就需要借助DPU、FPGA、數(shù)據(jù)壓縮卡等額外的硬件做協(xié)處理,對(duì)系統(tǒng)進(jìn)行加速。第三,數(shù)據(jù)存儲(chǔ)需要優(yōu)化元數(shù)據(jù)和數(shù)據(jù)的寫入策略,減少不必要的垃圾回收,提升系統(tǒng)性能。
其次,存儲(chǔ)系統(tǒng)如何降低閃存的使用成本。雖然閃存的成本在趨勢(shì)上不斷下降,會(huì)替代2.5寸機(jī)械盤,但成本仍高于3.5寸大容量機(jī)械盤。另外,不同閃存介質(zhì),對(duì)應(yīng)的可擦寫次數(shù)或者說使用壽命是不同的,而且差異很大,比如當(dāng)前主流的TLC和QLC介質(zhì)可擦寫次數(shù)就相差5倍。所以根據(jù)數(shù)據(jù)熱度的不同,合理使用介質(zhì),以及提升介質(zhì)壽命和空間利用率,可以有效降低使用成本。
對(duì)于上面兩個(gè)難題,李博樂認(rèn)為,盤控協(xié)同是最優(yōu)解。
比如在提升性能方面,浪潮存儲(chǔ)是業(yè)界唯一具備存儲(chǔ)軟件棧和閃存盤全棧的技術(shù)研發(fā)能力的廠商,可以通過盤控協(xié)同,推進(jìn)閃存盤面向特定場(chǎng)景的定向調(diào)優(yōu),存儲(chǔ)系統(tǒng)性能;還能基于元數(shù)據(jù)與數(shù)據(jù)的寫入優(yōu)化,降低寫放大,讓系統(tǒng)性能再上一個(gè)臺(tái)階。在SPC-1國際基準(zhǔn)測(cè)試中,浪潮存儲(chǔ)六次刷新存儲(chǔ)性能世界記錄。
李博樂表示,今年IPF上,浪潮存儲(chǔ)還出新一代PCIe 4.0 NVMe 企業(yè)級(jí)SSD。我們通過拓展NAND與控制器之間的通道,大幅提升SSD性能,實(shí)現(xiàn)業(yè)界領(lǐng)先的性能水平,其中順序?qū)懶阅艹^5GB/s,隨機(jī)寫性能超過45萬IOPS,超越所有主流廠商。
又如圍繞降低閃存使用成本這個(gè)難題,浪潮存儲(chǔ)采用介質(zhì)分層技術(shù),將不同熱度的數(shù)據(jù)存在不同的介質(zhì)中,避免介質(zhì)性能瓶頸和介質(zhì)“大材小用”,此外,像浪潮這樣擁有介質(zhì)研發(fā)能力的廠商,通過不斷優(yōu)化數(shù)據(jù)管理算法和容錯(cuò)算法,能夠提升SSD盤本體壽命,降低客戶TCO;并且通過盤控協(xié)同,通過合理的數(shù)據(jù)組織減少寫放大縮減閃存盤的OP,提升SSD的空間利用率。
李博樂表示,目前,浪潮信息聚焦智慧計(jì)算戰(zhàn)略,以算力、算法、數(shù)據(jù)、網(wǎng)絡(luò)四大支柱,為客戶構(gòu)建開放、敏捷、集約、高效的數(shù)字信息基礎(chǔ)設(shè)施。浪潮存儲(chǔ)近幾年表現(xiàn)非常亮眼,市場(chǎng)增速中國第一,存儲(chǔ)裝機(jī)容量已經(jīng)位居全球前三、中國前一。今后,浪潮存儲(chǔ)希望借助新一代G6存儲(chǔ)平臺(tái)、企業(yè)級(jí)SSD,以全棧技術(shù)創(chuàng)新加速存儲(chǔ)業(yè)務(wù)增長(zhǎng),釋放數(shù)據(jù)價(jià)值加速數(shù)實(shí)相融。