過去二十年,數字經濟蓬勃發展,深入改變了人們的生產和生活方式。數據已經成爲數字經濟時代最核心的生產要素。移動互聯網成爲社會的數字基礎設施,社交網絡、電子商務、移動支付已經重構每個中國人的生活方式,人工智能在各行業的應用持續拓展和深化,有望成爲新一代的技術基礎設施。工業互聯網已在千行百業生根發芽,賦能工業企業實現數字化轉型,經過對數據的採集和分析造成智能反饋,推進造成全新的生產製造和服務體系,提升企業生產效率,創造差別化的產品和增值服務,隨着5G網絡部署逐漸鋪開,企業的智能化升級正獲得進一步加速。前端
1、數字化基礎設施產生海量數據,存儲產業面臨巨大機會算法
新基建涵蓋了衆多的數字化基礎設施:雲計算、人工智能、工業互聯網、5G、物聯網、數據中心、智能計算中心等信息基礎設施,以智能交通、智慧能源爲表明的融合基礎設施。新基建以數字化爲核心,推進產業向高端化發展,這個過程必然產生大量的數據以及相應的採集、存儲、分析和歸檔需求。根據機構預測,到2025年智能終端數量將達到400億個,全球數據總量也將從2020年的44ZB躍升到180ZB,其中30%屬於實時數據,75%來自邊緣和終端。數據庫
數據不只總量巨大,增加速度也十分驚人,一家智能化的醫院天天能夠生成3TB數據,一座智能工廠天天生成1PB數據,一座智慧城市天天產生的數據量是250PB。新基建將加速企業的數字化轉型,大量新的硬件與應用帶來數據量快速增加的同時,也讓數據類型愈來愈多樣化。生產、採集和保存儘量多的數據,用於全量分析以洞察先機已成爲企業的共識。海量數據蘊含巨大的價值,給存儲系統帶來了史無前例的機會和挑戰。安全
2、量變引起質變,海量數據的管理日益複雜服務器
隨着網絡邊緣設備增多、數據規模增加,數據的分佈、流動和處理的模式在發生變化,企業計算架構隨着技術和業務需求的更新也在不斷演進,新的問題逐漸浮現。網絡
數據的時間價值凸顯數據結構
數據隨時間不斷產生,同時在智能應用中持續迭代計算,從物聯網獲取的數據更附帶了鮮明的時序屬性。在任什麼時候刻,近期產生的數據和頻繁參與計算的基礎數據相對更有價值,數據在不一樣歷史階段的使用頻次不一樣,而總量巨大的數據必然須要佔用寶貴的存儲空間,所以高性能存儲保存高價值數據、常規存儲保存中等價值數據、高性價比存儲空間保存低價值數據並綜合考慮數據的傳輸成本是合理的介質資源分配邏輯,數據在不一樣介質之間的存儲、流轉和生命週期管理是將來管理者的基礎需求。架構
混合雲存儲的數據自由流動併發
爲適應競爭激烈的市場環境,企業在努力縮短與客戶的距離,大量業務向互聯網化和敏捷化的方向演進,逐漸造成了在公有云部署敏捷業務、在私有云存儲核心數據的局面,這種公共雲和私有云共存的形態在將來很長時間都會是常態。所以,如何實現公共雲和私有云之間數據的自由流動,如何作到業務無感知,用戶不須要關注數據的位置,實現數據的融合、自由遷移和安全合規很是重要。運維
雲邊協同的數據管理
萬物互聯的5G時代,物與物之間的鏈接將急劇增多,終端數量增加,數據採集渠道更加豐富,物聯網設備將在網絡邊緣對數據進行計算、存儲、處理和分析,邊緣存儲適用於與物聯網設備緊密相關、數據傳輸延遲敏感、數據交互次數多、數據傳輸量大的物聯網應用,如工業物聯網、車聯網、智慧城市、無人機、視頻監控等。數據在雲存儲和邊緣存儲之間的流動更趨複雜,雲邊協同的數據管理能力變得尤其重要。
簡化管理應對數據中心架構變革
企業計算架構處於全方位的變革中,傳統計算能力讓位於虛擬化、雲化、容器化和智能化,單一的文件存儲和塊存儲正在被經濟高效的軟件定義存儲替代。數據中心架構變革處在新舊轉換期,軟件定義存儲呼嘯而來,傳統存儲仍有存在價值,兩者的統一管理將有效下降數據中心的建設和運維成本。
3、爲海量數據而生的智能存儲
不一樣類型的基礎技術和業務需求致使了存儲對數據感知能力的差別。塊存儲普遍應用於業務專有系統中,這類系統要求很高的隨機讀寫性能,所以塊存儲有較強的I/O感知能力,對不一樣大小數據塊(如4KB/8KB/16KB)讀寫可以感知和加速讀寫。文件存儲一般要兼顧多個應用和更多用戶訪問,以文件爲單位的讀寫使得文件存儲在必定程度上能夠感知內容,對不一樣類型的文件(如文檔、圖片、音頻、視頻)讀寫有對應的優化手段。
基礎技術的不一樣也致使存儲特性的較大差別,塊存儲如同跑車,容量有限但追求極致的速度、穩定性和可靠性;文件存儲如同大貨車,容量較大,兼容性好,若是不須要極限性能,能夠適用於各類常規存儲需求;新興的對象存儲如同超大型集裝箱船舶,容量極大,支持海量併發訪問,內置的元數據結構可用於識別數據的多維度屬性,使得對象存儲能夠實現應用感知(如某數據庫應用、某機器視覺的工業應用、某人工智能應用的模型訓練),並所以針對智能應用提供加速能力,甚至將一些在應用層處理代價很高的問題卸載到存儲服務器中解決。
以對象存儲爲核心技術的海量智能存儲,憑藉靈活的去中心化架構帶來的彈性擴展能力、高併發訪問等自然優點,消除了容量和性能的約束,輕鬆支撐EB級規模,以千萬級IOPS和TB級聚合帶寬知足高併發訪問需求,提供多層次多策略的企業級數據保護,加之部署簡單、靈活擴容的特色,逐漸取代傳統存儲,爲海量數據提供極致容量、極致性能、極致可靠的底層支撐,爲工業應用提供智能的數據服務,是數字化基礎設施堅實的數字底座。
4、全新的數據模式須要多元化的數據管理
由於數據規模的增加、數據來源的泛化、應用的容器化,應用和數據的分佈呈多元化發展,須要有豐富的策略管理日益複雜的數據分佈和流動模式。
全生命週期自動化管理
數據的遷移管理目前主要依靠人力完成,運維人員的經驗決定了管理的質量,數據的容量決定了遷移的效率。智能存儲根據數據訪問頻率以及對數據內容和上層應用的感知,經過策略自動化管理熱溫冷數據的流動,解放人力簡化運維。好比在醫院的PACS影像系統中,近期影像存放在高性能介質,三個月以上的中期影像數據存放在低成本介質,一年以上的影像自動歸檔到藍光存儲或公有云平臺長期保存,兼顧性能和成本需求,數據分層效率提高十倍,並且顯著下降管理難度。
混合雲存儲的統一管理
出於安全和成本的考量,企業每每將敏捷業務部署在公有云,同時將重要數據存放在私有云,以兼顧業務靈活和數據安全。企業存儲須要和公有云存儲結合起來,提供業務無感知的數據融合和流動。杉巖數據和阿里雲在這個領域開展了很是有益的合做,做爲國內第一家支持阿里雲OSS雲存儲服務的企業存儲廠商,企業客戶將能夠實現應用和數據的靈活部署,應用部署地點和數據存儲空間再也不相互制約,知足「敏捷-安全-成本」的混合雲存儲需求。
總部與分支機構間的數據匯聚和分發
雲邊協同的數據管理能力對存儲系統支撐總部與分支機構間的數據匯聚和分發相當重要。跨地域的機構內數據訪問,須要在較低的網絡帶寬條件下實現較高的讀寫性能、跨區域的統一文件視圖和異地容災能力。爲了在相互矛盾的條件下知足上述需求,企業智能存儲須要提供一個數據同步和分發架構,在存儲層面實現跨區域集羣數據的統一命名空間和數據流動,經過雙活架構提供數據災難恢復能力,經過CDN實現總部中心節點的數據分發,經過分支機構的數據就近寫入實現總部的數據自動匯聚,並經過跨區域的數據調度簡化應用層數據共享的複雜性。
傳統存儲和軟件定義存儲的統一管理
隨着企業數據中心架構總體轉向軟件定義,必須考慮新舊設備綜合利用的需求,軟件定義存儲的部署愈來愈多,與此同時傳統存儲也將長期存在並在其生命週期中繼續發揮做用,經過對異構存儲的統一管理整合現有設備資源可有效保護既有投資。杉巖數據已經支持對文件存儲設備的納管,對塊存儲設備的納管也將根據客戶和合做夥伴的需求陸續提供。
5、雙擎驅動:存儲核心引擎 + 智能數據處理引擎
高效支撐海量數據的智能存儲,既要立足當下,更要面向將來。杉巖數據敏銳地洞察到高效存儲海量小文件(小於500KB)是不少對象存儲客戶的核心需求,長時間寫入以數十億計的小文件很容易引起性能降級,在存儲容量利用率較高的時候降低幅度尤其明顯,杉巖數據存儲核心引擎經過在分佈式負載管理、元數據加速、文件合併讀寫等關鍵技術的長期投入實現了百億級小文件的性能高度穩定,已經達到超越行業30%的水準。
在企業經營活動中,數據智能驅動生產決策,深度挖掘數據價值成爲剛需。智能存儲不只僅存放數據,更與前端應用深度融合,知足數據處理、機器學習場景的應用需求。杉巖智能存儲內置了一套智能數據處理引擎,對企業應用須要的數據處理、快速文件檢索、機器學習模型訓練提供支撐能力,實現智能應用的流程精簡,大幅下降了用於智能計算的硬件投入需求,快速提高數據處理效率。好比智能數據處理引擎提供的圖像處理功能,能夠在存儲系統中實現圖片轉碼、文件格式轉換、視頻抽幀,以節省容量需求、加速數據處理;經過圖像識別和OCR功能,幫助證券公司優化AI質檢算法,提升質檢效率;經過對海量原始數據的歸檔、元數據加速的快速文件檢索幫助優化AI算法,加快機器學習模型訓練的迭代速度。
6、海量智能存儲打造新基建數字底座
新基建爲中國的產業升級清晰地指明瞭方向,數字化基礎設施的普遍建設以及隨之產生的新型應用需求將帶來了數據爆發式的增加,海量數據蘊含巨大的價值,在帶來更多機遇的同時,也給傳統的IT基礎設施帶來了史無前例的挑戰,更多樣化的數據模式、日益複雜的數據管理以及高效的數據利用對存儲提出了更高的要求,建設新一代海量智能存儲成爲解決這些數據應用問題的關鍵,智能存儲必將成爲新基建的堅實數字底座。