從5G、云計算、大數(shù)據(jù),到物聯(lián)網(wǎng)、人工智能......技術(shù)創(chuàng)新正推動千行百業(yè)迅猛發(fā)展。特別是在開源大模型掀起的新一輪數(shù)智化浪潮下,作為企業(yè)核心資產(chǎn)的數(shù)據(jù),已成為驅(qū)動業(yè)務(wù)創(chuàng)新與可持續(xù)發(fā)展的重要生產(chǎn)要素。Gartner預(yù)測,到2028年,企業(yè)軟件應(yīng)用中具備自主性AI的比例將從不到1%升至33%,30%的企業(yè)機構(gòu)會把數(shù)據(jù)變現(xiàn)或入表納入數(shù)據(jù)戰(zhàn)略。在此背景下,作為數(shù)據(jù)承載關(guān)鍵設(shè)施的存儲,正經(jīng)歷前所未有的變革。
數(shù)智時代,數(shù)據(jù)存儲如何助力企業(yè)釋放AI潛力?
人工智能要發(fā)展,算力、算法和數(shù)據(jù)這三大關(guān)鍵支柱缺一不可。長期以來,行業(yè)主要把關(guān)注點放在算力和算法的優(yōu)化上。但隨著大模型不斷向更深層次演進,情況發(fā)生了變化,數(shù)據(jù)的重要性被提升到了前所未有的戰(zhàn)略高度,這也讓數(shù)據(jù)存儲面臨著更為嚴(yán)苛的挑戰(zhàn)。中關(guān)村在線認為,大模型既需要高質(zhì)量數(shù)據(jù)集作為支撐,又導(dǎo)致數(shù)據(jù)量爆炸式增長,而且數(shù)據(jù)還在不同介質(zhì)間頻繁流動。因此,怎樣存儲、管理和處理這些大規(guī)模、高速度流通的海量數(shù)據(jù),就成了亟待解決的問題。
應(yīng)對海量數(shù)據(jù)存儲與處理挑戰(zhàn),數(shù)據(jù)存儲需有多維度關(guān)鍵能力:提升數(shù)據(jù)處理速度是關(guān)鍵,大模型訓(xùn)練數(shù)據(jù)量大增,需優(yōu)化存儲架構(gòu)、利用高性能介質(zhì)和智能管理技術(shù),實現(xiàn)數(shù)據(jù)低延遲、高并發(fā)訪問,縮短處理周期,加速模型迭代;促進數(shù)據(jù)高效共享協(xié)同也很重要,要構(gòu)建統(tǒng)一平臺,實現(xiàn)數(shù)據(jù)集中管理、按需分配與權(quán)限控制,提高數(shù)據(jù)利用效率;保障數(shù)據(jù)安全可靠是基礎(chǔ),通過加密、多副本冗余、容災(zāi)備份等確保數(shù)據(jù)完整安全,保障模型運行。
在數(shù)智化浪潮的推動下,數(shù)據(jù)存儲已突破單純解決容量與性能問題的局限,轉(zhuǎn)而承擔(dān)起推動數(shù)據(jù)智能流動、實現(xiàn)數(shù)據(jù)價值的重要使命。與此同時,隨著AI應(yīng)用不斷向縱深拓展,數(shù)據(jù)的生成、存儲、處理與管理正逐步構(gòu)建起一個全新的產(chǎn)業(yè)鏈環(huán)節(jié)。在這一發(fā)展趨勢下,企業(yè)能夠更為便捷、高效地對數(shù)據(jù)實施全生命周期管理,深度挖掘數(shù)據(jù)潛力,充分釋放數(shù)據(jù)價值。
然而,這并非易事,支撐數(shù)據(jù)存儲解決方案的存儲技術(shù)需持續(xù)進化。全球閃存及先進存儲技術(shù)企業(yè)閃迪認為,面對AI訓(xùn)練數(shù)據(jù)集指數(shù)級增長、數(shù)據(jù)形式愈發(fā)多樣化以及邊緣計算設(shè)備規(guī)?;渴穑鎯A(chǔ)設(shè)施的演進對于同時實現(xiàn)性能、容量與能效等多維度的躍升至關(guān)重要。閃存技術(shù)憑借其卓越的I/O性能、彈性擴展能力、能效優(yōu)勢和高可靠性,已成為支撐AI數(shù)據(jù)中心、智能網(wǎng)聯(lián)汽車、智能移動終端等前沿領(lǐng)域發(fā)展的關(guān)鍵推動者。
智算中心場景下,數(shù)據(jù)存儲具備哪些能力?
進入2025年,以DeepSeek為代表的開源大模型的風(fēng)靡,推動大模型從訓(xùn)練階段進入后訓(xùn)練及推理階段,并呈現(xiàn)大模型于云端訓(xùn)練和推理、小模型于邊緣端后訓(xùn)練和推理的趨勢。在該趨勢下,數(shù)據(jù)存儲在與算力發(fā)揮同樣重要作用的同時,其容量與性能的提升、智能數(shù)據(jù)管理與資源優(yōu)化分配、增強的安全性及存儲效率,以及存儲能耗的改善,已成為至關(guān)重要的核心性能指標(biāo),而高性能的存儲設(shè)備無疑成為必需品。
注意到,針對數(shù)據(jù)中心AI應(yīng)用部署過程中不同的基礎(chǔ)設(shè)施需求和工作負載特性,閃迪提供了多樣化的企業(yè)級固態(tài)硬盤產(chǎn)品線,覆蓋“計算密集型”和“存儲密集型”應(yīng)用場景,幫助企業(yè)針對不同階段差異化的存儲需求,優(yōu)化存儲組合來應(yīng)對大規(guī)模AI運算負載,進而提高效率并降低TCO,進一步優(yōu)化在AI領(lǐng)域的投資效益。接下來,中關(guān)村在線以閃迪DC SN861企業(yè)級SSD為例,看它如何滿足“計算密集型”數(shù)據(jù)中心的需求。
在大模型訓(xùn)練場景下,大模型需要機器學(xué)習(xí),這就要求數(shù)據(jù)在計算單元和存儲單元之間頻繁地移動,不同的計算任務(wù)也會向存儲系統(tǒng)發(fā)送不同模式的I/O請求。這些都對存儲設(shè)備的性能提出考驗。PCIe Gen 5帶來的帶寬提升滿足了人工智能行業(yè)計算密集型工作環(huán)境對高速計算和低時延的需求,采用PCIe Gen 5接口的閃迪DC SN861企業(yè)級SSD,可實現(xiàn)卓越的隨機讀寫表現(xiàn),較上一代提升約3倍,超低的延遲和非凡的響應(yīng)速度使其尤為適用于大語言模型的訓(xùn)練、推理和AI服務(wù)部署。
Sandisk DC SN861企業(yè)級SSD
不僅如此,數(shù)據(jù)在頻繁地移動過程中不但消耗大量的時間,還產(chǎn)生巨大的能耗。為此,閃迪DC SN861 企業(yè)級SSD也做了改進,其更低的能耗能夠提供更高的每瓦特IOPS(IOPS/Watt),有助于企業(yè)進一步降低TCO。此外,閃迪DC SN861 企業(yè)級SSD專為關(guān)鍵任務(wù)工作負載設(shè)計,提供了豐富的功能集,包括兼容NVMe 2.0和OCP 2.0規(guī)范、支持1次或3次每日全盤寫入(DWPD)以及5年有限保修。據(jù)悉,SN861 E1.S已經(jīng)通過 NVIDIA GB200 NVL72系統(tǒng)認證,用于加速計算應(yīng)用。
大模型訓(xùn)練及推理也需要海量的數(shù)據(jù)作為支撐,這就需要大容量存儲設(shè)備。為此,針對存儲密集型應(yīng)用,閃迪還提供大容量企業(yè)級SSD——SN655,容量高達64TB,旨在為構(gòu)建更高速、更龐大的AI數(shù)據(jù)湖提供卓越的性能和容量支持,滿足AI數(shù)據(jù)準(zhǔn)備的需求。
大模型平權(quán)加速推進,邊緣、端側(cè)存儲迎來利好!
當(dāng)下,全球AI技術(shù)正掀起一場“平權(quán)革命”。DeepSeek等開源大模型的興起,使得AI應(yīng)用門檻大幅降低,應(yīng)用場景拓展,邊緣側(cè)、端側(cè)AI的發(fā)展與普及也對高性能存儲提出新的需求。
以汽車智能化為例,隨著智能化升級,更多智能座艙應(yīng)用及生態(tài)功能將需要大容量、高帶寬及高可靠性地存儲。為此,閃迪提供豐富的產(chǎn)品組合,致力于為汽車行業(yè)打造更智能、更具功能的下一代智能網(wǎng)聯(lián)車提供有力支持,幫助用戶獲取更為智能化的優(yōu)質(zhì)駕駛體驗。
其中,Sandisk iNAND AT EU752 UFS 4.1嵌入式閃存驅(qū)動器作為閃迪旗下首款采用UFS 4.1標(biāo)準(zhǔn)的車規(guī)級產(chǎn)品,采用了閃迪最新BiCS8 TLC NAND技術(shù),預(yù)計性能可達此前閃迪UFS 3.1產(chǎn)品的兩倍以上,且容量將達市場現(xiàn)有產(chǎn)品的兩倍,高達1TB。旨在支持需要更高存儲性能、容量、耐久性和可靠性的革新應(yīng)用,推動汽車領(lǐng)域的AI創(chuàng)新。
此外,閃迪的AT EN610 NVMe SSD作為車規(guī)級,高性能,支持寬溫工作范圍的存儲解決方案,是閃迪專為滿足下一代高性能中央計算架構(gòu)的嚴(yán)苛需求而設(shè)計。AT EN610采用了大容量TLC閃存,并為用戶提供了將全部或部分存儲空間配置為高耐久性的SLC模式的靈活選擇。AT EN610使用M.2 1620 BGA封裝,并擁有高達1TB的存儲容量。
在大模型不斷涌現(xiàn)的當(dāng)下,以AI手機為代表的移動智能終端設(shè)備,在性能、容量和能效上需達到全新標(biāo)準(zhǔn),同時還得具備數(shù)據(jù)安全、碎片文件管理等創(chuàng)新功能。閃迪iNAND MC EU711嵌入式閃存驅(qū)動器,為用戶帶來優(yōu)化的移動存儲體驗。
值得一提的是,iNAND MC EU711嵌入式閃存驅(qū)動器基于BiCS6 162層TLC NAND打造,提供128GB、256GB、512GB和1TB四種容量版本,采用符合JEDEC全新發(fā)布的UFS 4.1標(biāo)準(zhǔn),在保持低功耗運行的同時,性能較UFS 3.1規(guī)格產(chǎn)品提升一倍,順序讀取速度高達4,000MiB/s,順序?qū)懭胨俣雀哌_3,000MiB/s。此外,該產(chǎn)品使用Advanced RPMB隱私加密、熱能效管理和保護等功能。
時下,數(shù)智化浪潮洶涌,數(shù)據(jù)在呈指數(shù)級增長的同時,已成企業(yè)數(shù)智化升級創(chuàng)新的核心動力。據(jù)IDC預(yù)測,全球人均日產(chǎn)生數(shù)據(jù)量將從2024年的10GB躍升至2034年的100GB,全球數(shù)據(jù)總量預(yù)計將突破200ZB大關(guān)。而數(shù)據(jù)存儲作為數(shù)據(jù)的載體,正經(jīng)歷前所未有的變革,不再局限于單純解決容量和性能方面的難題,而是肩負著推動數(shù)據(jù)智能流動、實現(xiàn)數(shù)據(jù)價值的重要使命。
在AI浪潮下,數(shù)據(jù)存儲技術(shù)、產(chǎn)品以及面向智算中心、邊緣側(cè)、端側(cè)的存儲解決方案,將持續(xù)迭代升級、不斷進化。這些演進無一不是聚焦于在性能、容量與能效等多個維度實現(xiàn)質(zhì)的飛躍。在這場數(shù)據(jù)存儲領(lǐng)域迎來的深刻變革,閃迪憑借創(chuàng)新的技術(shù)、解決方案,及極具前瞻性的戰(zhàn)略布局,推出數(shù)據(jù)存儲的持續(xù)創(chuàng)新,在挖掘數(shù)據(jù)價值的同時,釋放AI潛力。
(審核編輯: 光光)
分享