0
記錄與存儲(chǔ)，是人類(lèi)文明永恒的話題。
從遠(yuǎn)古時(shí)代世界各地的人類(lèi)不約而同在石壁作畫(huà)后，信息的存儲(chǔ)與傳播開(kāi)始刻進(jìn)人類(lèi)基因，并經(jīng)歷了萬(wàn)年的進(jìn)化。
從結(jié)繩記事、甲骨文，到竹簡(jiǎn)、紙張，再到打孔紙、軟盤(pán)、硬盤(pán)，到磁帶、磁盤(pán)、光盤(pán)，一直演化到SSD/閃存，存儲(chǔ)經(jīng)歷了脫胎換骨的變化。
幾乎每一次數(shù)據(jù)存儲(chǔ)的變革，都伴隨著人類(lèi)社會(huì)和經(jīng)濟(jì)發(fā)展的飛躍。
過(guò)去，在各類(lèi)高科技、熱門(mén)賽道中一直是計(jì)算站在聚光燈下，存儲(chǔ)常被忽視。
但外界的忽視并不妨礙其“黃金配角”的地位，無(wú)論曾經(jīng)的元宇宙，還是AIGC，亦或是“當(dāng)紅炸子雞”大模型，在任何一個(gè)時(shí)期最熱賽道的底層，都能找到存儲(chǔ)。
阿里云，也開(kāi)始了存儲(chǔ)領(lǐng)域底層技術(shù)的攻池略地。
在云計(jì)算時(shí)代，算力、網(wǎng)力、存力，共同構(gòu)筑了云計(jì)算的基礎(chǔ)。隨著云上業(yè)務(wù)的迅猛發(fā)展，通用算力和AI算力以指數(shù)級(jí)迅速增加，網(wǎng)絡(luò)從25G、100G、200G、400G快速演進(jìn)，并將進(jìn)入800G時(shí)代。而以SSD為代表的存力，同樣面臨了新的挑戰(zhàn)和訴求。
以大模型訓(xùn)練為例，數(shù)據(jù)規(guī)模大、訓(xùn)練時(shí)間長(zhǎng)，DL網(wǎng)絡(luò)層多、連接多，每層都需要存儲(chǔ)權(quán)重、偏置闡述，激活函數(shù)、輸入輸出數(shù)據(jù)、模型結(jié)構(gòu)等都需要存儲(chǔ)，這就對(duì)存儲(chǔ)帶寬和I/O性能提出了更高要求。
訓(xùn)練大模型的幾個(gè)難點(diǎn)，本質(zhì)上都是圍繞如何利用好數(shù)據(jù)這一核心命題展開(kāi)。臺(tái)前，是熱火朝天的大模型“百模大戰(zhàn)”，臺(tái)后，是算力和存力的底座在嗡嗡作響。
算力是生產(chǎn)力，存力亦是。
市場(chǎng)對(duì)于存儲(chǔ)的技術(shù)創(chuàng)新需求呼之欲出，存儲(chǔ)產(chǎn)業(yè)需要軟硬件全方位的技術(shù)升級(jí)。
計(jì)算機(jī)有三大核心存儲(chǔ)部件：閃存芯片（數(shù)據(jù)的最終存儲(chǔ)地）、內(nèi)存芯片（用于暫存SSD內(nèi)的眾多管理表項(xiàng)、數(shù)據(jù)緩存）、SSD主控芯片。
而SSD主控芯片是SSD的大腦，負(fù)責(zé)主機(jī)交互、協(xié)議解析與執(zhí)行、數(shù)據(jù)讀寫(xiě)、數(shù)據(jù)糾錯(cuò)、數(shù)據(jù)管理、后臺(tái)任務(wù)、帶外管理。換句話說(shuō)，SSD的功能、性能與可靠性均由其實(shí)現(xiàn)。
作為一顆為云計(jì)算場(chǎng)景定制的芯片，鎮(zhèn)岳510在性能、時(shí)延、能效和可靠性等關(guān)鍵指標(biāo)方面，均達(dá)到業(yè)界第一梯隊(duì)水平。其每秒可處理高達(dá)340萬(wàn)筆IO，這一數(shù)字意味著一顆鎮(zhèn)岳510的性能，相當(dāng)于1萬(wàn)塊高性能HDD的性能總和。在時(shí)延方面，鎮(zhèn)岳實(shí)現(xiàn)了業(yè)界領(lǐng)先的超低的時(shí)延（4μs），比業(yè)界SSD降低30%以上；在可靠性方面，平頭哥同樣注入了創(chuàng)新技術(shù)，其自研的高性能LDPC糾錯(cuò)算法，讓編碼效率逼近香農(nóng)極限，直接把數(shù)據(jù)恢復(fù)的可靠性再優(yōu)化了一個(gè)數(shù)量級(jí)，每讀取百億億筆數(shù)據(jù)，才可能有一筆數(shù)據(jù)糾錯(cuò)失敗。
這樣的紙面實(shí)力不僅僅是這顆芯片進(jìn)入SSD主控芯片市場(chǎng)的敲門(mén)磚，在新舊技術(shù)更迭之際，更有望成為數(shù)據(jù)中心存儲(chǔ)芯片領(lǐng)域的新選擇。正如平頭哥產(chǎn)品總監(jiān)周冠鋒所說(shuō)，這是鎮(zhèn)岳510入局的最佳時(shí)機(jī)。
阿里云盤(pán)古是伴隨阿里云飛操作系統(tǒng)誕生的，過(guò)去十幾年經(jīng)歷了多次技術(shù)演進(jìn)，并經(jīng)歷了十多年雙11的淬煉，是阿里巴巴的數(shù)據(jù)存儲(chǔ)底座，同時(shí)也支撐了阿里云各類(lèi)存儲(chǔ)服務(wù)產(chǎn)品。
而這一階段的盤(pán)古在存儲(chǔ)架構(gòu)、分布式數(shù)據(jù)冗余算法、運(yùn)維管控等技術(shù)上一是成果斐然，但在底層硬件上更多的是采用行業(yè)標(biāo)品。
阿里云資深技術(shù)專(zhuān)家吳忠杰告訴雷峰網(wǎng)，之前用通用硬件做云計(jì)算、云存儲(chǔ)，定義的硬件不是圍繞云計(jì)算使用的方式去，效率不是最佳。
以SSD為例，設(shè)計(jì)之初，需要兼容傳統(tǒng)HDD盤(pán)的使用模式和各種軟件的使用習(xí)慣，SDD提供的接口也需要與HHD盤(pán)保持一致。
為此，平頭哥需要在SSD內(nèi)部做一個(gè)極其復(fù)雜的FTL，以維護(hù)映射表，模擬快設(shè)備的接口給上層的分布式系統(tǒng)。
但傳統(tǒng)存儲(chǔ)往往是單一應(yīng)用，而云計(jì)算平臺(tái)，單個(gè)節(jié)點(diǎn)所承受的IO規(guī)模比傳統(tǒng)的更大。
如果再采用傳統(tǒng)的網(wǎng)卡、硬件以及TCP/IP協(xié)議棧來(lái)去做阿里云的存儲(chǔ)系統(tǒng)，CPU將處于不停處理中斷、解包、TCP/IP協(xié)議棧的狀態(tài)，效率只會(huì)越來(lái)越低。
傳統(tǒng)的方式下，IO是一個(gè)瓶頸點(diǎn)。
此外，行業(yè)標(biāo)品的合作流程，是阿里云提交一些需求清單，但廠商能不能滿足這些需求，是未知數(shù)。
開(kāi)發(fā)環(huán)節(jié)，雙方配合并不深入，這些需求未來(lái)可能會(huì)出現(xiàn)在發(fā)布的產(chǎn)品里，也可能不知道在哪個(gè)環(huán)節(jié)，因此，產(chǎn)品交付到云團(tuán)隊(duì)后會(huì)暴露大量問(wèn)題。但那時(shí)候所有的設(shè)計(jì)已經(jīng)落地，無(wú)法返工，只能在下一階段進(jìn)行迭代和修復(fù)，如此，整個(gè)周期拉得非常長(zhǎng)。
隨著云計(jì)算承載的業(yè)務(wù)規(guī)模越來(lái)越大，行業(yè)通用標(biāo)品已經(jīng)難以全滿足云計(jì)算數(shù)據(jù)中心場(chǎng)景下對(duì)超大規(guī)模、需求多樣、高性?xún)r(jià)比、安全可靠以及軟硬件一體化等方面的要求。
換句話說(shuō)，云計(jì)算已經(jīng)在定義硬件。
海量數(shù)據(jù)、業(yè)務(wù)多樣背景下，云計(jì)算對(duì)于軟硬件一體化的系統(tǒng)實(shí)際上提出了更高的要求。
在云存儲(chǔ)領(lǐng)域，需要從芯片層面就進(jìn)行深度的定制化，以此來(lái)解決各種復(fù)雜場(chǎng)景下的兼容性問(wèn)題。
鎮(zhèn)岳510，正是云定義硬件的產(chǎn)物，也是一款為云而生的存儲(chǔ)主控芯片。
云定義硬件之所以能破除IO瓶頸，是因?yàn)樗诖怪?、端到端的視角，根?jù)上層軟件的工作，結(jié)合硬件接口、使用方式等硬件的特性去設(shè)計(jì)，如此，無(wú)論是功耗還是IO效率，亦或是NAND Flash的插儲(chǔ)和性能，端到端的整體效率能能達(dá)最優(yōu)，減少了大量無(wú)用功。
阿里云與平頭哥之間，無(wú)論從早期的需求階段還是開(kāi)發(fā)過(guò)程，雙方最大程度進(jìn)行了協(xié)同。“怎么樣結(jié)合上層的存儲(chǔ)系統(tǒng)去定義底層芯片的行為，有什么功能是需要卸載到盤(pán)內(nèi)部的，又有哪些功能是我們?cè)谙到y(tǒng)可以為SSD做減負(fù)的，我們?cè)谛枨蠖x階段為此花費(fèi)了很長(zhǎng)時(shí)間?！眳侵医鼙硎尽?br/>
這種端到端的協(xié)同設(shè)計(jì)，以云定義硬件的模式，極大地提升了芯片開(kāi)發(fā)整個(gè)環(huán)節(jié)的效率。
鎮(zhèn)岳510的誕生則意味著，其打破了這一結(jié)界，用軟件定義全新的硬件，讓底層硬件向前邁進(jìn)了一步。
阿里云并非為了硬件而做硬件，而是從全棧角度考慮，重新定義硬件與軟件之間的邊界，邊界之間如何進(jìn)行相互協(xié)調(diào)，讓整體的效能達(dá)到最優(yōu)。
這也是阿里云和傳統(tǒng)分離的數(shù)據(jù)中心、分離的數(shù)據(jù)機(jī)房所更具有價(jià)值的核心點(diǎn)。
鎮(zhèn)岳510作為平頭哥旗下第一顆SSD主控芯片，云開(kāi)始與底層芯片全方位融合聯(lián)合設(shè)計(jì)，強(qiáng)大的技術(shù)積累下，極致的性能，復(fù)雜負(fù)載下的穩(wěn)定時(shí)延，更優(yōu)的TCO，更高的存儲(chǔ)密度，更先進(jìn)的接口，給用戶(hù)提供更好的體驗(yàn)。
軟有盤(pán)古，作為自主研發(fā)的中國(guó)首個(gè)分布式云存儲(chǔ)系統(tǒng)，讓存儲(chǔ)更加穩(wěn)定可靠、擁有更大的容量和更高的性能。
硬有鎮(zhèn)岳510，更強(qiáng)存力、更高可靠等特點(diǎn)，還通過(guò)為云定制，帶來(lái)更優(yōu)秀的存儲(chǔ)體驗(yàn)，阿里云的存儲(chǔ)系統(tǒng)也實(shí)現(xiàn)了硬件能力的躍遷。
面對(duì)數(shù)字經(jīng)濟(jì)對(duì)海量存儲(chǔ)和快速存儲(chǔ)的需求，阿里云的存儲(chǔ)后備軍軟硬綜合實(shí)力一流，在存力競(jìng)爭(zhēng)上已經(jīng)領(lǐng)先一個(gè)身位。
如果說(shuō)數(shù)據(jù)是核心生產(chǎn)要素，負(fù)責(zé)為數(shù)字經(jīng)濟(jì)的各種場(chǎng)景應(yīng)用提供源源不斷的“生產(chǎn)資料”的存力，就是數(shù)字經(jīng)濟(jì)的底座。
高并發(fā)互聯(lián)網(wǎng)應(yīng)用、萬(wàn)億參數(shù)的大模型井噴和爆發(fā)的時(shí)代，云計(jì)算被公認(rèn)為最核心的基礎(chǔ)設(shè)施。而未來(lái)十年，決定云計(jì)算實(shí)力的不僅僅是規(guī)模，軟硬件一體化的自研計(jì)算體系才是云服務(wù)商的立身之本，只有在計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)等核心技術(shù)和產(chǎn)品的研發(fā)上持續(xù)創(chuàng)新才能搶占定義權(quán)。雷峰網(wǎng)(公眾號(hào)：雷峰網(wǎng))雷峰網(wǎng)雷峰網(wǎng)
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見(jiàn)轉(zhuǎn)載須知。
