這段時間有點忙,好久沒有更新公衆號了。昨天有個粉絲催更,所以,我只能週末花點時間,和你們繼續分享個人存儲學習經驗。數據庫
這個時代變化很快,納斯達克100指數拼多多取代NetApp,這個新聞令我特別感慨。編程
PingWest品玩8月15日訊,納斯達克交易所宣佈,拼多多將在2020年8月24日開盤前取代NetApp成爲納斯達克100指數成分股。服務器
拼多多,原來特別討厭,如今我用得不少,淘寶已經基本不用了。由於拼多多假貨少了,價格也比淘寶實惠,關鍵所有免郵,購物體驗很是好。淘寶的郵費太亂了,8塊錢的東西,郵費收你20塊,這種訂價模式,讓你比價的時候永遠不知道那個最便宜。而拼多多就沒有這個煩惱,我基本都是快速下單,由於所有包郵,直接比價就能夠了。微信
拼多多表明互聯網新貴,而NetApp表明傳統科技企業。這種喜新厭舊,表明一個新的時代開始了。網絡
但存儲技術也在快速發展,雖然沒有互聯網的鉅變,可是也沒有一潭死水。今天,我就分享一下Gartner今年的存儲技術成熟度曲線,看看和去年有什麼變化。架構
在"Hype Cycle for Storage and Data Protection Technologies, 2020"報告裏,app
,Gartner評估了IT領導者必須評估以解決企業快速發展的需求的24種最相關的存儲和數據保護技術。
機器學習
2020年炒做週期中審查的技術有一半以上將在將來五到十年內成熟,而若是真正的業務需求推進,則有60%的技術有可能帶來高收益。爲了向讀者提供更清晰,更專一的研究以支持他們的分析和計劃,今年Gartner刪除了一些再也不被大肆宣傳的創新配置文件。編輯器
2020年的曲線和2019年的曲線,咱們對比一下,發現:
分佈式
雲存儲網關創新配置文件已刪除,由於它在高原以前已過期。
如下配置文件已被刪除,由於它們已經到期而且再也不被炒做:
-
企業端點備份 -
虛擬機備份和恢復
2020年增長了三個新的創新配置文件:計算存儲,容器備份和dHCI。儘管這些技術在價值主張上有很大不一樣,但它們反映了IT領導者優先考慮利用新的閃存技術,改進和現代化數據保護以及爲存儲和數據保護平臺利用新的部署模式。
今年快速發展的技術包括存儲級內存固態硬盤、NVMe-oF和超融合,這些技術的採用率都在不斷提升,這主要是因爲人們但願利用存儲軟件創新來實現基於行業標準硬件的高性能而又有彈性的存儲基礎設施。
以下描述的配置文件已更改:
NVMe和NVMe-oF更改成NVMe-oF。
存儲級內存已分爲兩個配置文件:持久內存DIMM和存儲級內存SSD。
關於優先級矩陣,咱們來看看其變化:
咱們看到,和2019年同樣,具有transformational(變革性)優先級的仍是隻有Infrasturcture SDS(簡稱iSDS)。但也還須要5-10年才能到達部署高峯。
其餘的一些變化,你們能夠本身尋找。
今天,咱們主要來仔細展開看看今年新入圍的3個技術:計算存儲,容器備份和dHCI。
計算存儲(Computational Storage)
定義:計算存儲(CS)結合了處理和存儲介質,以容許應用程序在存儲介質上運行,從而減輕了CPU主存儲器的主機處理負擔。目的是經過直接在存儲設備內處理數據來減小數據移動。CS包含位於存儲設備上的更復雜的處理功能。CS存儲產品採用ASIC和SSD上的低功耗CPU內核的形式,具備更大的處理能力。
位置和採用速度的理由:計算存儲爲存儲帶來了計算能力,以減小存儲和計算資源之間的數據移動中的性能低下和對延遲敏感的問題。基於CS的系統可能包括數據壓縮,加密和獨立磁盤冗餘陣列(RAID)管理。隨着數據量的增長,數據移動成爲瓶頸。因爲存儲大小一般遠遠超過內存,所以必須從存儲介質中讀取數據。這阻礙了應用程序性能,破壞了大多數數據集的實時分析。存儲與處理分開的原則仍然是大多數企業IT系統的核心原則。數據密集型應用程序,例如AI / ML,高性能計算,分析,經過消除瓶頸,高頻交易以及身臨其境的混合現實流媒體將最大程度地受益。邊緣計算以及支持分佈式處理的應用程序仍然是一個機會。此外,與包括工業標準固態介質的存儲系統相比,在存儲介質上進行處理能夠提供顯着的性能提高,更好的內存管理和節能。
用戶忠告: CS市場仍處於開發階段,少數供應商開始使用POC,限量和小批量生產系統。CS的早期用例正在迅速出現,包括機器學習處理,實時數據分析,高頻交易,多媒體制做和高性能計算。跨多個CS節點運行的應用程序將表現最佳,並提供最大的收益。CS系統體系結構更加複雜,可能須要從新編譯應用程序,可能須要其餘API,或者使主機系統知道CS系統提供的服務。
建議I&O主管探索從特定用例中可能得到的收益,但應仔細權衡成本與性能收益之間的關係。在某些工做負載很是受輸入/輸出限制的狀況下,尤爲是在存儲工做中受益最大的狀況下,尤爲如此。該部門由小型初創公司領導,所以建議I&O領導進行充分的盡職調查。另外,監視正在進行中的存儲網絡行業協會(SNIA)CS技術工做組(TWG)的發展狀況,正在積極開展標準和互操做性工做,有20多家公司參與其中。
商業衝擊:改組數TB的數據涉及成本和時間因素。CS能夠爲數據密集型應用程序提供實質性的性能優點,尤爲是在邊緣計算中。結合其低功耗,CS提升了每瓦性能比,從而下降了邊緣應用的功耗成本。CS爲增值存儲服務(例如擦除編碼和數據庫分析功能)提供了一個可編程平臺,從而大大下降了應用程序和服務器/計算成本。CS是對容器工做負載的補充。在固態媒體控制器中使用功能更強大的計算將提升存儲效率並下降整體應用程序成本,從而使應用程序能夠直接訪問CS驅動器內部的NAND閃存芯片。經過利用通用閃存互連通道標準,能夠在應用程序和固態媒體設備/控制器之間大幅增長帶寬。可是,計算存儲供應商面臨的挑戰是如何利用資源和功能將目標受衆擴展到一些高級客戶以外,以執行具備顯着ROI優點的重要內部應用程序開發和測試。
福利等級:高
市場滲透率:不到目標受衆的1%
成熟度:新興
樣本供應商: Eideticom; NETINT Technologies; NGD Systems; Nyriad; Samsung; ScaleFlux
西瓜哥認爲,計算存儲有點相似超融合,應該在邊緣有較高的價值,但在數據中心,計算和存儲多數狀況仍是分開更好。如今服務器和存儲之間的帶寬已經不是問題,加上SDS的普及,使得大規模的計算和存儲獨立擴展更加靈活。
容器備份(Container Backup)
定義:容器備份解決方案主要經過管理具備集成功能的數據的其餘副本的複製過程來保護使用持久性存儲的容器中的數據,以將數據恢復爲一致狀態。容器備份解決方案既能夠做爲傳統備份解決方案的一部分提供,也能夠做爲存儲解決方案的一部分提供,也能夠做爲專用解決方案提供。
位置和採用速度的合理性:容器備份解決方案是一種新興技術,能夠保護組織在容器化環境中免受數據丟失。因爲容器具備無狀態架構,所以與在虛擬機或物理機中運行的傳統應用程序相比,它們須要不一樣的備份過程。領先的備份供應商開始經過與存儲供應商提供的容器存儲接口(CSI)插件提供的快照功能集成來保護持久性數據。容器備份在很大程度上是新生的,可是,企業環境中容器的採用曲線加速了對該領域數據保護解決方案的需求。
用戶建議:在企業中採用容器的組織應根據應用程序的重要性評估容器備份的需求。此外,採用容器備份解決方案不只是技術選擇,並且還須要與組織結構保持一致。與傳統基礎架構不一樣,容器備份操做將由應用工程團隊執行。所以,工程團隊和備份團隊之間可能須要必定程度的協調。保護容器還須要對備份基礎架構進行額外的投資。與企業中的全部其餘數據源同樣,組織應採用一種容器備份策略。組織可能首先須要採用專門的容器備份解決方案,由於它們會成爲重點,而企業供應商的採用會隨着時間的推移逐漸成熟。
業務影響:容器備份解決方案可解決與容器環境相關的數據丟失風險。隨着企業生產環境中容器的使用開始逐漸增長,保護數據的工做應與企業要求保持一致,就像全部企業數據同樣。此外,在企業環境中備份容器將進一步推進容器的採用,由於它更好地與企業數據保護策略保持一致。可是,從數據保護治理的角度來看,容器備份將是另外一個須要照顧的數據源,這會增長組織的負擔。
福利等級:中等
市場滲透率:不到目標受衆的1%
成熟度:新興
供應商樣本:Cohesity; Commvault; Dell EMC; IBM; Kasten; Portworx; Rubrik; Trilio
西瓜哥仍是比較看好容器備份,由於存儲有了CSI標準,在支持有狀態容器這塊發展很快,推進了容器在生產環境的應用,也大大增長了對容器備份的需求。容器備份將來的地位,就和如今虛擬機備份的地位相似,應該是每個備份廠商必備的功能。
dHCI(disaggregated HCI)
定義:分離式HCI是使用單獨的計算和存儲節點的三層存儲體系結構。存儲能夠是基於外部控制器的橫向擴展存儲,也能夠是專用的SDS。dHCI提供了簡化的HCI管理模型,同時容許獨立擴展計算和存儲。
位置和採用速度的合理性:基於外部控制器(ECB)和軟件定義的存儲(SDS)的供應商已經推出了分離式HCI(dHCI)產品,以針對但願易於使用超融合系統但又須要非對稱擴展的客戶計算和存儲。與超融合相比,dHCI還能夠支持裸機工做負載,而且能夠提供更可預測的延遲和更高的存儲吞吐量。
Datrium於2016年推出了首個dHCI解決方案(DVX)。緊隨其後的是其餘供應商,包括2017年的NetApp HCI和2019年的HPE Nimble Storage dHCI。隨着愈來愈多的供應商進入市場,dHCI愈來愈受到青睞,並推進了集成基礎架構系統(IIS)的增加。
用戶建議: dHCI解決方案提供了ECB存儲解決方案的許多優勢,並結合了超融合解決方案的簡單性和VM級別的存儲供應功能。當I&O主管的工做負載知足如下條件時,應評估dHCI解決方案:
須要混合使用不一樣的服務器大小和配置。
佔用大量存儲容量。
有不平衡的計算和存儲增加要求。
要求極高的交易速率或吞吐量。
須要可預測的延遲。
在考慮實施dHCI解決方案時,I&O主管應:
肯定適合dHCI系統的特定工做量或計劃。
服務器,存儲和虛擬化團隊共同實施,由於這三者都須要技能和項目一致性。
首先部署做爲概念驗證,以確保知足性能,可用性,自動化和易用性指望。
業務影響: dHCI能夠提供更高的敏捷性,下降的服務成本以及增長達到服務水平的可能性。成功實施dHCI解決方案的I&O領導者將把dHCI視爲一項戰略投資,該投資可實現自動化,敏捷的體系結構,從而提供現代業務所需的靈活性和可擴展性。
福利等級:中等
市場滲透率:目標受衆的1%至5%
成熟度:新興
供應商樣本: Datrium;HPE;NetApp
咱們知道,Nutanix發明了HCI,並且Nutanix也是HCI市場的領導者,雖而後來VMware迎頭遇上。dHCI這個概念是Datrium發明的,但Datrium作得並很差,目前已經被VMware收購,並且其dHCI產品線中止銷售,VMware只保留其DRaaS產品。如今市場上主推dHCI的主要是NetApp(NetApp沒有HCI),後來HPE也加入(HPE一直有HCI)。西瓜哥比較看好dHCI,存儲的廠商都比較喜歡dHCI,服務器廠商更喜歡HCI。dHCI若是採用SDS的方式,存儲和計算獨立擴展,但使用體驗和HCI同樣。你們須要注意的是,dHCI在市場數據統計的時候,Gartner是算在融合系統裏,但不算在超融合裏,但IDC是算在HCI市場裏的。所以,之後dHCI市場若是起來的話,Gartner說的超融合和IDC說的HCI的市場數據可能差距會很大。
咱們看到,存儲技術也在發展,雖然沒有互聯網發展那麼快。但存儲是以穩爲主的,可靠性比速度更重要。雖然存儲如今沒有那麼火了,但我仍是會繼續堅持研究存儲,繼續和你們分享存儲的學習經驗。這個Gartner的報告其實7月6日就發佈了,我一直沒有解讀,是但願裏面有一些樣本公司購買這份報告的reprint權限,這樣我解讀的時候就能夠把原文分享給你們。但惋惜的是,到目前爲止,沒有任何一家公司免費分享這份報告,你們只能看個人解讀了,暫時沒有機會看原文了。
本文分享自微信公衆號 - 高端存儲知識(High-end_Storage)。
若有侵權,請聯繫 support@oschina.cn 刪除。
本文參與「OSC源創計劃」,歡迎正在閱讀的你也加入,一塊兒分享。