最近,我確信企業(yè)級(jí)分布式存儲(chǔ)EDS(以下簡(jiǎn)稱EDS)正式完成了Kubernetes(以下簡(jiǎn)稱K8S)CSI標(biāo)準(zhǔn)數(shù)據(jù)持久存儲(chǔ)的正式對(duì)接。
與虛擬機(jī)不同,容器以其輕量級(jí)、快速交付和靈活擴(kuò)展而聞名,但它們主要面臨存儲(chǔ)級(jí)別的兩大挑戰(zhàn)。1)容器默認(rèn)使用主機(jī)的本地存儲(chǔ),不能跨節(jié)點(diǎn)共享數(shù)據(jù),也不能在集群內(nèi)靈活調(diào)度,其存儲(chǔ)擴(kuò)展能力受主機(jī)限制;2)容器實(shí)例的發(fā)布是快速批量進(jìn)行的,不能滿足K8S開放CSI標(biāo)準(zhǔn)前持久存儲(chǔ)資源快速匹配的要求。我深信,通過(guò)對(duì)接CSI標(biāo)準(zhǔn),EDS在解決上述問(wèn)題方面具有以下優(yōu)勢(shì)。首先,EDS存儲(chǔ)資源完全池化并按需使用,支持容器的靈活擴(kuò)展。其次,EDS支持創(chuàng)建二級(jí)存儲(chǔ)資源,它可以快速響應(yīng)批處理容器實(shí)例發(fā)出的存儲(chǔ)資源匹配要求。
此外,K8S容器繼續(xù)從最初的無(wú)狀態(tài)應(yīng)用程序部署場(chǎng)景擴(kuò)展到各種類型的數(shù)據(jù)處理業(yè)務(wù)場(chǎng)景,如Devops開發(fā)和操作、持續(xù)集成、大數(shù)據(jù)人工智能培訓(xùn)等。這就對(duì)存儲(chǔ)提出了更高的要求。結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)混合并存;文件大小分布廣泛,從千字節(jié)級(jí)的小文件到千兆字節(jié)級(jí)的大文件;多類型數(shù)據(jù)讀寫有不同的存儲(chǔ)性能要求,如低延遲、高吞吐量、海量小文件存儲(chǔ)等。深信EDS是為多種數(shù)據(jù)類型開發(fā)的企業(yè)級(jí)統(tǒng)一分布式存儲(chǔ)。系統(tǒng)同時(shí)支持塊、文件和對(duì)象存儲(chǔ)。單個(gè)節(jié)點(diǎn)的吞吐量性能可以達(dá)到每秒2gb,在3節(jié)點(diǎn)配置中可以連續(xù)寫入100億個(gè)小文件,性能抖動(dòng)小于5%。
EDS支持K8S CSI標(biāo)準(zhǔn),降低了集裝箱存儲(chǔ)資源的使用和管理成本,很好地滿足了數(shù)據(jù)處理場(chǎng)景下對(duì)集裝箱存儲(chǔ)性能的高要求,實(shí)現(xiàn)了集裝箱存儲(chǔ)性能提升和成本降低的雙向加速。
我深信EDS自2016年開始就應(yīng)用于桌面云和超融合,服務(wù)于珠海市公安局、青島市北區(qū)法院、中國(guó)地震第二監(jiān)測(cè)局、招商局基金等用戶,至今已積累了數(shù)千個(gè)服務(wù)用戶??梢灶A(yù)測(cè),隨著5G、云計(jì)算、人工智能和超高清等新興技術(shù)的進(jìn)一步發(fā)展,數(shù)據(jù)將呈爆炸式增長(zhǎng),存儲(chǔ)將面臨新的挑戰(zhàn)。我相信,EDS將繼續(xù)圍繞“可靠性、高性能和智能管理”三大核心競(jìng)爭(zhēng)力深化分布式存儲(chǔ)和創(chuàng)新,就像今天解決容器的持久存儲(chǔ)問(wèn)題一樣,它將繼續(xù)為用戶解決未來(lái)的新存儲(chǔ)問(wèn)題。