解決大型文件存儲和傳輸問題的實踐

 如今的企業數據中心存儲容量和WAN（廣域網）鏈接正面臨着日益增長的大型非結構化數據文件。對於那些使用愈來愈多的視頻、圖片和圖像的公司來講，文件大小通常預計都是在不斷增長。在最近的Network Computing State of Storage（網絡計算存儲情況）調查中發現，大部分回答者表示每一年的存儲增加率爲10%到24%。之因此形成這種現象的緣由是咱們在這種膨脹數據上的一般作法。咱們在內部存儲目錄和通訊帶寬上的作法是迎合的是平常交易處理的小型文件，而不是針對大型數據有效載荷。

　　對於企業來講有兩個難題：提升帶寬以便優化大型文件傳輸，使其符合業務需求；從新設計存儲機制以容納日益增長的大型文件。

　　Fiber Utilities Group是一傢俬有網絡外包管理公司，管理着超過8000英里的光纖網絡。該公司客戶服務經理Dave Lunemann表示：「幾年前，私有網絡的聲勢尚未今天這麼大。這是由於如今有這麼多公司都依賴於互聯網來知足它們的廣域網需求。

　　不過，風向在改變。大型企業和公司關注的是它們所打交道的大型數據文件。Lunemann表示：「大型企業對服務質量（QoS）、安全性、延遲性和冗餘性的要求很高。這也就是爲何它們轉而尋找私有網絡的緣由。由於私網不像標準互聯網那樣有那麼多的帶寬限制。」

　　私網的效果是可觀的。光纖私網的響應時間可讓猶他州的客戶像看本地銀行那樣看愛荷華州的銀行，對業務來講這是很好的。西海岸的基因研究部門能夠將一個很是大型的文件安全快速地傳送給東海岸的合做者，不浪費科學家的時間。跨州經營的醫療公司能夠快速地傳輸MRI（磁共振成像）和X射線圖像，優化病人的護理。

　　The Mill是一家位於倫敦的虛擬效果製做公司。該公司在倫敦、紐約和洛杉磯都有開發人員。它的客戶包括耐克、Turner Classic Movies和BBC。計算機系統管理員Jonathan Brazier表示：「咱們實際上利用一個私有的MPLS（多協議標籤交換）網絡來鏈接咱們全部的辦公室。

　　固然，大型文件管理並不只僅是在網絡帶寬限制下的文件傳輸。對於公司來講，下一步就是制定一個數據中心設計戰略來存儲數據，以便可以以經濟有效的方式快速訪問數據。

　　Ilion是一家西班牙視頻製做社，專門爲全球客戶創做電影動畫。Ilion首席技術官兼技術總監Gonzalo Rueda表示：「在高峯時間，咱們要用350多我的手。」Ilion開始的時候只有20到40人，所以人員擴張加上天天產生的大型動畫文件給它的視頻渲染系統帶來了極大的壓力。

　　Rueda表示：「咱們聘用了諮詢人員並審視了幾個不一樣的方案來解決咱們的大型文件存儲問題。咱們並不只僅感興趣於存儲系統能夠處理多少IOPS（每秒輸入輸出）或吞吐速度。咱們但願獲得一個與咱們目前業務相兼容的解決方案。對我來講，這意味着咱們必須從新思考咱們的存儲架構以便更好地知足將來的業務需求。」

　　Ilion最終決定採用BluArc的Titan 2200存儲集羣來升級存儲。Rueda表示：「咱們的活躍網絡工做站有90TB的數據，另外還有10TB的不太常常訪問的數據必須放到歸檔中去。咱們同時還必須從新制定數據冗餘性和熱備用的最佳實踐。」

　　結果就是Ilion同時採用FC（光纖通道）和SATA驅動器。將那些常常被訪問的數據放到更快更昂貴的FC驅動器上，將不常常訪問的數據放到更慢更便宜的SATA驅動器上。

　　Rueda表示：「自從咱們採用這個解決方案之後，咱們的速度提升3-4倍，並且咱們看到咱們對FC和SATA數據分配的策略是正確的。它讓咱們在有70名動畫人員同時工做的時候還能夠支持繁重的生產負荷和實時文件，同時還不會帶來性能上的降低。咱們還獲得了可擴展性。這樣的能力能夠支持咱們日益擴張的業務。」

　　像Ilion這樣的視頻製做社和通常的中小企業不同，它們有着本身的獨特的要求，就好像說跨國銀行的帶寬需求和通常大型企業也不同。不過，它們反映出大型數據文件的管理將成爲每一個人須要面對的挑戰。這主要是由於咱們將面對愈來愈多帶富媒體內容的文件，並且咱們愈來愈多地利用互聯網以及互聯網論壇在興起（好比社交網絡）。全部這些都會產生大型文件，而這些文件都須要足夠的帶寬。

　　對於大企業和中小企業的公司IT部門來講這意味着什麼？若是他們還沒開始作的話，如今是時候審視和從新思考存儲和網絡戰略了。數據中心那幫對財務比較保守的人可能還不肯意作出改變，所以可能比較少的單位會放棄它們現有的東西而購買新的東西。不過，2011年預算規劃中能夠從新審視路線圖，審視軟硬件資產退休週期並用新的觀點來審視數據中心存儲和帶寬該如何跟上業務需求。