百億產(chǎn)業(yè)規(guī)模之后,中國(guó)分布式存儲(chǔ)市場(chǎng)有哪些重要趨勢(shì)?
過(guò)去十年里,數(shù)字經(jīng)濟(jì)的蓬勃發(fā)展,不僅帶來(lái)了數(shù)據(jù)爆炸性增長(zhǎng),也讓數(shù)據(jù)的重要性日漸突顯。
如果說(shuō)數(shù)據(jù)存儲(chǔ)是數(shù)字經(jīng)濟(jì)發(fā)展的數(shù)字底座,那么分布式存儲(chǔ)就是底座中基石,不可或缺。當(dāng)下,中國(guó)分布式存儲(chǔ)產(chǎn)業(yè)化已經(jīng)初具規(guī)模,中國(guó)信通院調(diào)查數(shù)據(jù)顯示,2021年中國(guó)分布式存儲(chǔ)市場(chǎng)規(guī)模達(dá)到178億元,年增速44%;預(yù)計(jì)未來(lái)三年,市場(chǎng)仍將保持40%以上的增長(zhǎng)率。
面對(duì)如此高速增長(zhǎng)的市場(chǎng),華為、戴爾科技、浪潮、曙光、XSKY、杉巖數(shù)據(jù)等多家企業(yè)都積極加入其中。那么,分布式存儲(chǔ)市場(chǎng)近年來(lái)為何獲得越來(lái)越多用戶認(rèn)可?中國(guó)分布式存儲(chǔ)市場(chǎng)存在著哪些重要趨勢(shì)?中國(guó)分布式存儲(chǔ)市場(chǎng)產(chǎn)業(yè)化如何走向一條健康、良性的發(fā)展之路?
近日,首屆分布式存儲(chǔ)產(chǎn)業(yè)發(fā)展論壇正式召開,來(lái)自產(chǎn)、學(xué)、研和用多方代表齊聚一堂,共商分布式存儲(chǔ)產(chǎn)業(yè)發(fā)展新機(jī)遇與新路徑。會(huì)上,分布式存儲(chǔ)產(chǎn)業(yè)方陣(DSIA)還正式發(fā)布了《分布式存儲(chǔ)發(fā)展白皮書》。從本次論壇上,我們或能對(duì)分布式存儲(chǔ)未來(lái)趨勢(shì)見微知著。
分布式存儲(chǔ)為何備受青睞
近年來(lái),繁榮的數(shù)字經(jīng)濟(jì)、千行百業(yè)的數(shù)字化轉(zhuǎn)型,讓數(shù)據(jù)存儲(chǔ)市場(chǎng)持續(xù)增長(zhǎng)。其中,分布式存儲(chǔ)更是以遠(yuǎn)超市場(chǎng)平均增長(zhǎng)的速度獲得各界極大關(guān)注。那么,哪些因素驅(qū)動(dòng)了分布式存儲(chǔ)在數(shù)據(jù)存儲(chǔ)市場(chǎng)中一枝獨(dú)秀?
首先,從長(zhǎng)遠(yuǎn)趨勢(shì)看,數(shù)字經(jīng)濟(jì)將成為社會(huì)經(jīng)濟(jì)發(fā)展的新引擎,其繁榮發(fā)展必然帶來(lái)數(shù)據(jù)的爆炸性增長(zhǎng)。IDC預(yù)測(cè),到2025年,中國(guó)的數(shù)據(jù)量將增長(zhǎng)到48.6ZB,80%是非結(jié)構(gòu)化數(shù)據(jù),并且將成為全球最大的數(shù)據(jù)圈。而且非結(jié)構(gòu)化數(shù)據(jù)的增長(zhǎng)速度遠(yuǎn)超結(jié)構(gòu)化數(shù)據(jù),這讓擅長(zhǎng)處理、存儲(chǔ)非結(jié)構(gòu)化數(shù)據(jù)的分布式存儲(chǔ)如魚得水。
其次,從應(yīng)用場(chǎng)景趨勢(shì)看,隨著5G等基礎(chǔ)設(shè)施建設(shè)的完善,像自動(dòng)駕駛、智慧交通、智能制造、智慧港口、智慧礦山等新應(yīng)用場(chǎng)景開始大量涌現(xiàn),這些新應(yīng)用、新場(chǎng)景在基礎(chǔ)設(shè)施層普遍基于分布式架構(gòu),并且融合了大數(shù)據(jù)、AI、物聯(lián)網(wǎng)等技術(shù),同時(shí)還會(huì)持續(xù)產(chǎn)生海量數(shù)據(jù),非常適合采用分布式存儲(chǔ)來(lái)存儲(chǔ)和處理數(shù)據(jù)。
第三,從政策導(dǎo)向上看,在中國(guó)市場(chǎng),隨著數(shù)字化轉(zhuǎn)型的深入,各行各業(yè)都在鼓勵(lì)分布式相關(guān)技術(shù)的應(yīng)用與部署,這無(wú)疑會(huì)在基礎(chǔ)設(shè)施層推動(dòng)分布式存儲(chǔ)的普及與應(yīng)用。目前,金融、電信、政務(wù)、制造等多個(gè)行業(yè)均已經(jīng)加大了分布式存儲(chǔ)的采購(gòu),未來(lái)這種趨勢(shì)還會(huì)持續(xù)。
例如,央行金融科技委員會(huì)在《金融科技發(fā)展規(guī)劃(2022—2025年)》明確金融數(shù)字化轉(zhuǎn)型的八大任務(wù),其中就包括建設(shè)分布式架構(gòu)的先進(jìn)基礎(chǔ)設(shè)施,推動(dòng)國(guó)內(nèi)大批金融機(jī)構(gòu)加速進(jìn)行分布式架構(gòu)改造,將大量應(yīng)用遷移和部署到分布式存儲(chǔ)之上。
可以說(shuō),從長(zhǎng)遠(yuǎn)趨勢(shì)、應(yīng)用現(xiàn)狀和政策導(dǎo)向等方面看,分布式存儲(chǔ)深入到千行百業(yè)的基礎(chǔ)設(shè)施層已是大勢(shì)所趨,其擴(kuò)展性、高性能、開發(fā)性等特性與用戶數(shù)字化轉(zhuǎn)型的基礎(chǔ)設(shè)施建設(shè)需求高度契合,也鑄就了產(chǎn)業(yè)化的基礎(chǔ)。
分布式存儲(chǔ)這些趨勢(shì)一定要知道
首先,分布式存儲(chǔ)產(chǎn)品形式和交付形態(tài)會(huì)出現(xiàn)重要趨勢(shì),即軟硬一體機(jī)的方式將成為市場(chǎng)的絕對(duì)主流和用戶首選。
眾所周知,分布式存儲(chǔ)領(lǐng)域產(chǎn)品形態(tài)多樣,主要有商業(yè)軟件+專用硬件、商業(yè)軟件+通用硬件、開源軟件+通用硬件三種形態(tài),可以為用戶提供豐富的選擇。但應(yīng)用場(chǎng)景發(fā)展到現(xiàn)階段,應(yīng)用規(guī)模、應(yīng)用復(fù)雜性早已今非昔,采用分布式存儲(chǔ)純軟件+通用硬件的方式逐漸很難適應(yīng)用戶在部署、性能、管理、服務(wù)等方面的需求。
這是因?yàn)椋植际酱鎯?chǔ)純軟件+通用硬件的方式,不僅需要對(duì)軟硬件兼容適配、部署、性能調(diào)優(yōu)、管理等方面花費(fèi)大量精力,遇到問(wèn)題也很難判斷是哪方的責(zé)任,不利于問(wèn)題的快速解決,可能會(huì)嚴(yán)重影響到業(yè)務(wù)。
而分布式存儲(chǔ)一體機(jī)采用特定設(shè)計(jì)或針對(duì)性優(yōu)化的存儲(chǔ)硬件,通過(guò)軟硬協(xié)同實(shí)現(xiàn)端到端的高可靠、高性能、高擴(kuò)展以及一體化的運(yùn)維能力,則徹底降低了分布式存儲(chǔ)在部署、管理和服務(wù)等方面的復(fù)雜性,全面滿足用戶需求,逐漸在市場(chǎng)中脫穎而出,成為用戶選擇分布式存儲(chǔ)的首選。
《分布式存儲(chǔ)發(fā)展白皮書》的數(shù)據(jù)也印證了這一趨勢(shì)?!栋灼窋?shù)據(jù)透露,2021年中國(guó)分布式存儲(chǔ)市場(chǎng)規(guī)模已達(dá)百億元級(jí),其中一體機(jī)形態(tài)占比高達(dá)91%。
其次,分布式存儲(chǔ)在擴(kuò)展性、性能、多協(xié)議支持、可靠性和開發(fā)性等方面的優(yōu)勢(shì),使得其適配應(yīng)用場(chǎng)景的潛力巨大,隨著新應(yīng)用、新場(chǎng)景日漸豐富,必然會(huì)帶來(lái)大量的數(shù)據(jù)存儲(chǔ)需求,而分布式存儲(chǔ)有望加速獲得更多應(yīng)用。
《分布式存儲(chǔ)發(fā)展白皮書》也總結(jié)出當(dāng)前分布式存儲(chǔ)適用的九大典型應(yīng)用場(chǎng)景,既包括虛擬化/云計(jì)算、電子票據(jù)、醫(yī)療影像等傳統(tǒng)應(yīng)用場(chǎng)景,也覆蓋了HPC、大數(shù)據(jù)分析、AI、工業(yè)互聯(lián)網(wǎng)等新應(yīng)用場(chǎng)景。
例如,像精準(zhǔn)醫(yī)學(xué)領(lǐng)域的基因測(cè)序,智慧交通領(lǐng)域的自動(dòng)駕駛,能源領(lǐng)域的勘探,類腦科學(xué)研究、媒體動(dòng)畫制作等場(chǎng)景,都屬于典型的HPC場(chǎng)景,這些場(chǎng)景負(fù)載類型多樣、應(yīng)用復(fù)雜、容量需求走向EB級(jí)、性能要求極高,而分布式存儲(chǔ)對(duì)于混合負(fù)載的支持,以及多協(xié)議的互通、高擴(kuò)展性等特性,使得其在上述場(chǎng)景中能夠充分發(fā)揮自身優(yōu)勢(shì),對(duì)業(yè)務(wù)提供極好的數(shù)據(jù)存儲(chǔ)保障。
第三,分布式存儲(chǔ)技術(shù)迎來(lái)架構(gòu)、硬件、軟件和數(shù)據(jù)管理將迎來(lái)一次全面變革。面向HPC、大數(shù)據(jù)分析和AI等新應(yīng)用、新場(chǎng)景時(shí),分布式存儲(chǔ)逐漸走在了創(chuàng)新的最前沿,從架構(gòu)等層面進(jìn)行針對(duì)性的創(chuàng)新,從滿足新應(yīng)用的需求。例如,面向混合負(fù)載、多協(xié)議互通、支持全閃化的分布式存儲(chǔ)架構(gòu)已經(jīng)成為華為等廠商力推的發(fā)展方向。
比如,大數(shù)據(jù)分析場(chǎng)景愈發(fā)普遍,大數(shù)據(jù)分析發(fā)展到如今,計(jì)算與存儲(chǔ)分離、解耦成為大勢(shì)所趨,計(jì)算、存儲(chǔ)資源按需配置有利于降低整體TCO,這就要求分布式存儲(chǔ)能夠支持存算分離,一套存儲(chǔ)同時(shí)支持HDFS、文件、對(duì)象等多協(xié)議的訪問(wèn),以及流式入湖、統(tǒng)一元數(shù)據(jù)等。
《白皮書》也認(rèn)為,分布式存儲(chǔ)在架構(gòu)、硬件、軟件、數(shù)據(jù)管理和綠色節(jié)能等方面依然有著眾多可以創(chuàng)新與突破的領(lǐng)域,業(yè)界廠商聚焦這些領(lǐng)域的創(chuàng)新,不僅有望推動(dòng)分布式存儲(chǔ)產(chǎn)品、技術(shù)的演進(jìn),更利于整個(gè)產(chǎn)業(yè)的長(zhǎng)遠(yuǎn)發(fā)展。
總體來(lái)看,中國(guó)分布式存儲(chǔ)市場(chǎng)規(guī)模達(dá)到百億級(jí)之后,的確為市場(chǎng)注入了前所未有的創(chuàng)新活力,進(jìn)一步推動(dòng)了產(chǎn)品架構(gòu)與技術(shù)的創(chuàng)新,但產(chǎn)業(yè)化的健康發(fā)展之路,依然存在著不小挑戰(zhàn),亟待各界形成共識(shí)。
產(chǎn)業(yè)化提速:這些因素不可忽略
當(dāng)前,中國(guó)分布式存儲(chǔ)的產(chǎn)業(yè)化已經(jīng)初具規(guī)模,為今后的長(zhǎng)遠(yuǎn)、健康發(fā)展打下了堅(jiān)固基礎(chǔ),但要想讓產(chǎn)業(yè)化提速、獲得更健康的發(fā)展,還需要產(chǎn)學(xué)研用各界力量從產(chǎn)業(yè)發(fā)展環(huán)境、技術(shù)創(chuàng)新與突破、產(chǎn)業(yè)標(biāo)準(zhǔn)等方面進(jìn)一步完善。
例如,國(guó)家今年完成了全國(guó)一體化大數(shù)據(jù)中心體系總體布局設(shè)計(jì),正式啟動(dòng)了東數(shù)西算工程。數(shù)據(jù)存儲(chǔ)無(wú)疑在東數(shù)西算工程中的重頭戲。針對(duì)東數(shù)西算工程及之后一系列應(yīng)用,分布式存儲(chǔ)產(chǎn)業(yè)各界需要盡快形成共識(shí),積極融入其中,充分發(fā)揮分布式存儲(chǔ)的作用與價(jià)值。
另外,分布式存儲(chǔ)面向全閃化的架構(gòu)重構(gòu)、專用數(shù)據(jù)處理芯片、安全可信、非結(jié)構(gòu)化數(shù)據(jù)縮減等關(guān)鍵技術(shù)都極具挑戰(zhàn),考驗(yàn)著分布式存儲(chǔ)廠商從軟件到硬件的全棧設(shè)計(jì)和研發(fā)能力,需要各大分布式存儲(chǔ)廠商能夠在技術(shù)創(chuàng)新方面持續(xù)投入和取得突破,,打造出具有世界級(jí)競(jìng)爭(zhēng)力的產(chǎn)品。
又如,國(guó)內(nèi)分布式存儲(chǔ)標(biāo)準(zhǔn)體系依然處于起步階段,缺乏完整的體系化引領(lǐng)和指導(dǎo),需要產(chǎn)、學(xué)、研、用各方協(xié)同,加速?gòu)?qiáng)化標(biāo)準(zhǔn)體系的頂層規(guī)劃設(shè)計(jì),建立高質(zhì)量的技術(shù)要求和產(chǎn)品規(guī)范,保證產(chǎn)業(yè)的良性發(fā)展。
林林總總,中國(guó)分布式存儲(chǔ)產(chǎn)業(yè)迎來(lái)了前所未有的發(fā)展良機(jī),繁榮的數(shù)字經(jīng)濟(jì)和廣闊的應(yīng)用場(chǎng)景使得分布式存儲(chǔ)在中國(guó)市場(chǎng)大有可為。而隨著分布式存儲(chǔ)產(chǎn)業(yè)方陣(DSIA)的成立,產(chǎn)業(yè)標(biāo)準(zhǔn)和評(píng)測(cè)體系有望加速落地,而各大企業(yè)加大創(chuàng)新力度,也有望為市場(chǎng)帶來(lái)更多活力。