訂閱
糾錯(cuò)
加入自媒體

新AI內(nèi)存:英偉達(dá)押注,比肩HBM

圖片

在算力需求指數(shù)級(jí)增長(zhǎng)的今天,存儲(chǔ)技術(shù)正經(jīng)歷著從"被動(dòng)容器"到"主動(dòng)參與者"的范式轉(zhuǎn)變。SOCAMM的誕生,標(biāo)志著內(nèi)存模塊首次實(shí)現(xiàn)了對(duì)計(jì)算需求的動(dòng)態(tài)響應(yīng)能力。其同步架構(gòu)通過(guò)統(tǒng)一時(shí)鐘信號(hào)實(shí)現(xiàn)數(shù)據(jù)傳輸?shù)木珳?zhǔn)編排,將帶寬提升至傳統(tǒng)DDR5的2.5倍,而適應(yīng)性調(diào)節(jié)機(jī)制則讓模塊在低負(fù)載時(shí)自動(dòng)進(jìn)入節(jié)能模式,功耗僅為同類(lèi)產(chǎn)品的三分之一。這種"智能節(jié)流"特性,使得SOCAMM在AI訓(xùn)練場(chǎng)景中能根據(jù)模型復(fù)雜度實(shí)時(shí)調(diào)整資源分配,避免了傳統(tǒng)內(nèi)存"大馬拉小車(chē)"的效率損耗。

SOCAMM,全稱(chēng)為Small Outline Compression Attached Memory Module,即小型化壓縮附加內(nèi)存模組。目前的SOCAMM模組基于LPDDR5X DRAM芯片。與先前的LPCAMM2模組相似,SOCAMM同樣采用單面四芯片焊盤(pán)、三固定螺絲孔的設(shè)計(jì)。然而,與LPCAMM2不同的是,SOCAMM的頂部沒(méi)有凸出的梯形結(jié)構(gòu),這降低了其整體高度,使其更適合服務(wù)器安裝環(huán)境和液體冷卻系統(tǒng)。

01

技術(shù)曙光

這項(xiàng)由英偉達(dá)主導(dǎo)、聯(lián)合三星、SK海力士和美光共同開(kāi)發(fā)的技術(shù),基于LPDDR5X DRAM,通過(guò)694個(gè)I/O端口的設(shè)計(jì)(遠(yuǎn)超傳統(tǒng)LPCAMM的644個(gè)),將數(shù)據(jù)傳輸帶寬提升至傳統(tǒng)DDR5方案的2.5倍。其核心創(chuàng)新體現(xiàn)在三個(gè)方面。

在物理形態(tài)的設(shè)計(jì)革新上,SOCAMM 展現(xiàn)出了對(duì)傳統(tǒng)內(nèi)存模塊的突破性重構(gòu)。其整體尺寸僅為 14×90 毫米,外形類(lèi)似于一根細(xì)長(zhǎng)的U盤(pán),長(zhǎng)度大致相當(dāng)于成人的中指長(zhǎng)度。相較于目前主流的服務(wù)器內(nèi)存模塊(如 RDIMM),SOCAMM 的體積縮小了約 66%,這種高度緊湊的結(jié)構(gòu)不僅有效釋放了服務(wù)器內(nèi)部寶貴的空間資源,還為更高密度的硬件部署提供了可能性。尤其是在當(dāng)前數(shù)據(jù)中心普遍采用液冷系統(tǒng)的趨勢(shì)下,SOCAMM 更低的整體高度和更為平整的表面設(shè)計(jì)使其能夠更好地適配液體冷卻環(huán)境,避免因組件凸起而影響散熱效率或阻礙冷卻介質(zhì)流動(dòng)。

此外,SOCAMM 在設(shè)計(jì)理念上也打破了以往 LPDDR 內(nèi)存必須以焊接方式固定于主板上的限制。它采用了可拆卸的模塊化插拔結(jié)構(gòu),用戶(hù)可以像更換硬盤(pán)或 SSD 那樣便捷地進(jìn)行內(nèi)存升級(jí)或替換。這一變革徹底改變了 LPDDR 系列長(zhǎng)期以來(lái)作為“不可更換”組件的技術(shù)定位,賦予了系統(tǒng)更高的靈活性和可維護(hù)性。對(duì)于企業(yè)級(jí)用戶(hù)而言,這意味著無(wú)需更換整個(gè)主板即可完成內(nèi)存容量擴(kuò)展或技術(shù)迭代,大幅降低了設(shè)備升級(jí)的經(jīng)濟(jì)成本與運(yùn)維復(fù)雜度,·同時(shí)也延長(zhǎng)了服務(wù)器平臺(tái)的生命周期。

在性能與能效的協(xié)同提升方面,SOCAMM 同樣展現(xiàn)出其作為新一代高密度內(nèi)存模組的核心優(yōu)勢(shì)。該模塊基于先進(jìn)的 LPDDR5X DRAM 芯片構(gòu)建,通過(guò)四芯片堆疊的方式實(shí)現(xiàn)單模塊高達(dá) 128GB 的容量,并在 128-bit 位寬和 8533 MT/s 數(shù)據(jù)速率的支持下,提供超過(guò) 100GB/s 的帶寬能力。這種高性能特性使其特別適合應(yīng)對(duì) AI 訓(xùn)練、大規(guī)模推理以及實(shí)時(shí)數(shù)據(jù)分析等對(duì)內(nèi)存吞吐要求極高的計(jì)算任務(wù)。例如,在運(yùn)行參數(shù)規(guī)模達(dá)到 6710 億的 DeepSeek R1 這類(lèi)超大規(guī)模語(yǔ)言模型時(shí),SOCAMM 憑借其出色的帶寬表現(xiàn),能夠?qū)?shù)據(jù)加載時(shí)間縮短多達(dá) 40%。同時(shí),得益于 LPDDR5X 自身的低電壓設(shè)計(jì)和優(yōu)化后的封裝工藝,SOCAMM 還能在保持高性能的同時(shí)顯著降低功耗,據(jù)測(cè)算可使服務(wù)器整體運(yùn)行能耗減少約 45%。這種高效能與低功耗的平衡特性,使得 SOCAMM 不僅適用于集中式的數(shù)據(jù)中心,也能很好地服務(wù)于邊緣計(jì)算場(chǎng)景中對(duì)空間和能耗敏感的應(yīng)用需求。

在技術(shù)路線的選擇上,SOCAMM 并未追隨 HBM(高帶寬內(nèi)存)那種通過(guò) 3D 堆疊和硅通孔(TSV)技術(shù)追求極致帶寬的發(fā)展路徑,而是走出了一條更具實(shí)用性和可擴(kuò)展性的“中間路徑”。HBM 盡管在帶寬密度上具有絕對(duì)優(yōu)勢(shì),但其制造成本高昂、封裝工藝復(fù)雜,且主要應(yīng)用于 GPU 或?qū)S眉铀倨鞯南冗M(jìn)封裝架構(gòu)中,難以廣泛普及到通用型服務(wù)器平臺(tái)。相比之下,SOCAMM 在保留近 120GB/s 帶寬能力的基礎(chǔ)上,通過(guò)標(biāo)準(zhǔn)化的模塊設(shè)計(jì)和成熟的封裝工藝,顯著降低了部署門(mén)檻和制造難度,從而具備更強(qiáng)的成本控制能力和更廣泛的適用范圍。

這種差異化策略使SOCAMM 與 HBM 形成了良好的互補(bǔ)關(guān)系——HBM 更適用于需要高帶寬、低延遲的 GPU 和專(zhuān)用加速器集成場(chǎng)景,而 SOCAMM 則更適合那些需要靈活擴(kuò)展、兼顧性能與能效的通用型算力平臺(tái)。正因如此,SOCAMM 在未來(lái)數(shù)據(jù)中心的多樣化算力架構(gòu)中,有望成為一種關(guān)鍵的內(nèi)存解決方案,既滿(mǎn)足 AI 和大數(shù)據(jù)處理日益增長(zhǎng)的需求,又兼顧基礎(chǔ)設(shè)施的可持續(xù)發(fā)展與運(yùn)營(yíng)效率的提升。

從技術(shù)參數(shù)看,SOCAMM搭載的LPDDR5X技術(shù)使其在數(shù)據(jù)傳輸速率和能效上較傳統(tǒng)DRAM提升顯著,尤其適用于AI服務(wù)器中大規(guī)模并行計(jì)算的場(chǎng)景。然而,這種“折中路線”也面臨挑戰(zhàn):如何平衡模塊化帶來(lái)的成本上升與性能增益之間的關(guān)系?畢竟,HBM憑借堆疊式設(shè)計(jì)已在高端GPU領(lǐng)域占據(jù)主導(dǎo)地位,而SOCAMM若想突圍,必須證明其在單位成本下的性能優(yōu)勢(shì)。

02

重構(gòu)內(nèi)存市場(chǎng)

在CES 2025 上,英偉達(dá)推出了 GB10 Grace Blackwell 超級(jí)芯片和 Project DIGITS,旨在普及個(gè)人 AI 超級(jí)計(jì)算機(jī)。據(jù) EBN 稱(chēng),SOCAMM 被視為“下一代”HBM,在小型 PC 和筆記本電腦中具有優(yōu)于傳統(tǒng) DRAM 的性能和能效,這可能是關(guān)鍵。值得注意的是,EBN 報(bào)告暗示 英偉達(dá)計(jì)劃在其“DIGITS”系列的第一款產(chǎn)品中使用單獨(dú)的 LPDDR,并計(jì)劃在下一個(gè)版本中整合四個(gè) SOCAMM 模塊。

報(bào)告強(qiáng)調(diào),與基于DDR4 和 DDR5 的 SODIMM 模塊不同,SOCAMM 使用低功耗LPDDR5X來(lái)提高效率和性能。報(bào)告補(bǔ)充說(shuō),隨著 I/O 引腳的增加,它可以顯著提高數(shù)據(jù)傳輸速度,這對(duì)于 AI 計(jì)算至關(guān)重要。這些報(bào)告還表明,英偉達(dá)推動(dòng)自己的內(nèi)存標(biāo)準(zhǔn)標(biāo)志著 JEDEC 傳統(tǒng)框架的重大轉(zhuǎn)變。雖然 JEDEC 包括三星、SK 海力士和美光等內(nèi)存巨頭,但其成員還包括 Arm、NXP、英特爾、惠普和霍尼韋爾等半導(dǎo)體、服務(wù)器和 PC 公司。

SOCAMM的商業(yè)化進(jìn)程,恰逢AI算力需求從集中式云中心向邊緣設(shè)備滲透的關(guān)鍵節(jié)點(diǎn)。在英偉達(dá)Project DIGITS個(gè)人AI超級(jí)計(jì)算機(jī)項(xiàng)目中,SOCAMM的低功耗特性使其能搭載在桌面級(jí)設(shè)備中,將原本需要數(shù)據(jù)中心支持的千億參數(shù)模型推理任務(wù)下放至終端。這種"去中心化"趨勢(shì),正在催生新的商業(yè)模式:醫(yī)療機(jī)構(gòu)可部署本地化醫(yī)療影像分析系統(tǒng),制造業(yè)車(chē)間能實(shí)時(shí)處理傳感器數(shù)據(jù),而消費(fèi)級(jí)AR設(shè)備則獲得運(yùn)行復(fù)雜生成式AI的能力。

市場(chǎng)格局的洗牌已現(xiàn)端倪。美光宣布其SOCAMM模塊已實(shí)現(xiàn)量產(chǎn),直接對(duì)標(biāo)SK海力士的HBM4路線圖。

03

層層漣漪

SOCAMM的出現(xiàn)不僅是半導(dǎo)體技術(shù)演進(jìn)的新節(jié)點(diǎn),更如同一顆投入湖面的石子,在產(chǎn)業(yè)鏈激起層層漣漪。存儲(chǔ)領(lǐng)域的格局正面臨重塑,三星、SK海力士等HBM技術(shù)巨頭遭遇新挑戰(zhàn)——SOCAMM對(duì)LPDDR的深度整合,正推動(dòng)DRAM廠商向“模塊化封裝”轉(zhuǎn)型;其對(duì)基板材料更高密度布線工藝的需求,也迫使Simmtech(基板公司)等供應(yīng)鏈企業(yè)重新規(guī)劃技術(shù)路線。存儲(chǔ)技術(shù)的未來(lái)之爭(zhēng),在“堆疊式創(chuàng)新”的HBM與“模塊化重構(gòu)”的SOCAMM之間愈發(fā)激烈。

這場(chǎng)變革還延伸至AI芯片設(shè)計(jì)領(lǐng)域。傳統(tǒng)GPU依賴(lài)高成本、散熱復(fù)雜的HBM獲取高帶寬內(nèi)存,而SOCAMM憑借模塊化設(shè)計(jì),在性能與成本間找到了新的平衡點(diǎn)。這一突破促使行業(yè)探索“異構(gòu)存儲(chǔ)架構(gòu)”:將HBM用于核心計(jì)算單元,SOCAMM服務(wù)邊緣推理場(chǎng)景,構(gòu)建起多層次存儲(chǔ)生態(tài),實(shí)現(xiàn)芯片設(shè)計(jì)邏輯的范式遷移。

值得關(guān)注的是,SOCAMM雖發(fā)軔于服務(wù)器市場(chǎng),但其小型化特質(zhì)已顯露出進(jìn)軍消費(fèi)級(jí)終端的潛力。一旦在PC、筆記本電腦甚至移動(dòng)設(shè)備中替代傳統(tǒng)DRAM,終端設(shè)備的能效比將大幅提升,為輕量化AI應(yīng)用筑牢硬件根基。這場(chǎng)“從云端到終端”的技術(shù)滲透,必然加劇半導(dǎo)體企業(yè)對(duì)垂直場(chǎng)景的激烈爭(zhēng)奪。

04

隱憂(yōu)

盡管SOCAMM被寄予厚望,但其商業(yè)化進(jìn)程已暴露出多重風(fēng)險(xiǎn)。當(dāng)我們把SOCAMM的發(fā)展軌跡輸入行業(yè)分析模型,會(huì)發(fā)現(xiàn)它正處于技術(shù)奇點(diǎn)與商業(yè)博弈的疊加態(tài)。

盡管JEDEC已推動(dòng)LPCAMM2成為開(kāi)放標(biāo)準(zhǔn),但SOCAMM的私有屬性使其在生態(tài)適配上處于被動(dòng)。英偉達(dá)需投入大量資源說(shuō)服第三方廠商(如AMD、英特爾)加入其技術(shù)聯(lián)盟,否則SOCAMM將長(zhǎng)期局限于自家GPU生態(tài)。這種“封閉性代價(jià)”在AI芯片領(lǐng)域尤為明顯——例如,Meta等超大規(guī)模云計(jì)算廠商傾向于采用兼容性更強(qiáng)的CXL或HBM方案,而非綁定單一供應(yīng)商的SOCAMM。若英偉達(dá)無(wú)法在2027年前完成生態(tài)閉環(huán),可能錯(cuò)失AI硬件迭代的黃金窗口期。

從研發(fā)預(yù)測(cè)模型的數(shù)據(jù)看,SOCAMM的量產(chǎn)曲線出現(xiàn)顯著右移。原計(jì)劃2025年落地的節(jié)點(diǎn),如今已與Rubin架構(gòu)GPU的研發(fā)周期深度綁定,推遲至2027年。系統(tǒng)診斷顯示,高溫環(huán)境下的信號(hào)衰減問(wèn)題如同頑固的算法BUG,導(dǎo)致數(shù)據(jù)校驗(yàn)?zāi)K頻繁觸發(fā)熔斷機(jī)制;而16-die堆疊的LPDDR5X芯片良率,始終無(wú)法突破深度學(xué)習(xí)預(yù)測(cè)的及格線。美光與SK海力士的產(chǎn)能爬坡數(shù)據(jù)持續(xù)偏離預(yù)設(shè)軌道,迫使英偉達(dá)對(duì)GB300服務(wù)器主板進(jìn)行架構(gòu)回滾,就像AI模型發(fā)現(xiàn)訓(xùn)練數(shù)據(jù)偏差后重新調(diào)參,這種設(shè)計(jì)迭代產(chǎn)生的沉沒(méi)成本正在影響整個(gè)產(chǎn)品矩陣。

在市場(chǎng)競(jìng)爭(zhēng)的多智能體博弈模型中,SOCAMM面臨著三維度的壓力場(chǎng)。傳統(tǒng)內(nèi)存技術(shù)如DDR5和GDDR6,憑借成熟的成本優(yōu)化算法持續(xù)占據(jù)市場(chǎng)份額;CXL內(nèi)存池化技術(shù)則像重構(gòu)計(jì)算架構(gòu)的“去中心化協(xié)議”,正在打破內(nèi)存與CPU的強(qiáng)耦合關(guān)系;地緣政治因素如同突然介入的外部變量,刺激中國(guó)廠商加速研發(fā)XMCAMM等替代方案,這些“本土模型”的快速迭代正在改寫(xiě)全球市場(chǎng)的參數(shù)分布。

05

結(jié)語(yǔ)

SOCAMM的顛覆性不僅在于技術(shù)參數(shù),更在于其揭示了AI時(shí)代硬件創(chuàng)新的深層邏輯:性能突破必須與生態(tài)控制力同步推進(jìn)。然而,英偉達(dá)的“標(biāo)準(zhǔn)突圍”之路注定充滿(mǎn)荊棘——既有傳統(tǒng)勢(shì)力的反制,也有技術(shù)落地的現(xiàn)實(shí)阻力。若SOCAMM能克服量產(chǎn)難關(guān)并構(gòu)建開(kāi)放生態(tài),它或?qū)⒊蔀锳I硬件史上的里程碑;反之,則可能淪為又一個(gè)“技術(shù)烏托邦”的注腳。

       原文標(biāo)題 : 新AI內(nèi)存:英偉達(dá)押注,比肩HBM

聲明: 本文由入駐維科號(hào)的作者撰寫(xiě),觀點(diǎn)僅代表作者本人,不代表OFweek立場(chǎng)。如有侵權(quán)或其他問(wèn)題,請(qǐng)聯(lián)系舉報(bào)。

發(fā)表評(píng)論

0條評(píng)論,0人參與

請(qǐng)輸入評(píng)論內(nèi)容...

請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字

您提交的評(píng)論過(guò)于頻繁,請(qǐng)輸入驗(yàn)證碼繼續(xù)

  • 看不清,點(diǎn)擊換一張  刷新

暫無(wú)評(píng)論

暫無(wú)評(píng)論

    掃碼關(guān)注公眾號(hào)
    OFweek人工智能網(wǎng)
    獲取更多精彩內(nèi)容
    文章糾錯(cuò)
    x
    *文字標(biāo)題:
    *糾錯(cuò)內(nèi)容:
    聯(lián)系郵箱:
    *驗(yàn) 證 碼:

    粵公網(wǎng)安備 44030502002758號(hào)