存儲在線隨著信息時代的到來，非結構化數據文件開始急劇增長，充斥在企業數據中心存儲設備及網絡傳輸中。對于公司來說，這意味著更多的視頻，相片和圖像。按照常理，非結構化數據文件越來越多，所需存儲也會大幅增加，但是最近的一次網絡計算存儲情況調查表明，大部分受訪者都表示存儲的年增長率大約為10%—24%。而且目前的內部存儲設備和傳輸帶寬都是為日常事務處理所需的小型文件設計的，并不能滿足處理大數據的需求。在這樣的硬件和大數據相遇時，這種供需矛盾肯定會擦出火花。
處理這種矛盾，企業可以從兩方面下手：你需要足夠的帶寬，這樣你才能最優化大文件的傳輸速率，以滿足業務需求。另外，存儲設備升級計劃也要及時改變，以便滿足不斷增長的大文件。
光纖公用事業集團是一家私有的網絡外包管理公司，它有超過8000英里的光纖網。它的客戶服務經理戴夫·盧納曼說：“現在一提到私有網絡總會引發人們的爭論，因為跟許多年前不同，現在有太多的公司依賴于公用網絡來滿足它們的廣域網需求。”
但這種趨勢現在已經開始轉變，大型企業或公司主要的業務已經開始聚焦到它們每天處理的大型數據文件上。盧納曼說：“大型企業對服務質量，安全，延遲和冗余的要求非常高。這就是為什么它們回歸到私有網絡的原因，因為標準網絡的帶寬并不能滿足它們的需求。”
私有網絡的表現令人印象深刻：光纖專用網絡的響應時間非?？?，舉個例子，用戶在美國猶他州，他借助專用網絡查看在愛荷華州的一個銀行就像銀行在本地一樣，這對于處理業務來說非常方便。位于西海岸的基因研究小組可以向東海岸的伙伴發送一個非常大的文件，而且又快又安全，絕對不會浪費科學家們一丁點兒的時間。一個廣泛分布于多個國家的醫療公司可以輕松傳輸核磁共振及X光圖像，為病人提供醫療服務。
The Mill是一家位于倫敦的視覺效果公司，它的設計師們位于倫敦，紐約及洛杉磯，它的客戶包括Nike，特納經典電影頻道及BBC。它的電腦系統管理員喬納森·博茲亞說：“實際上我們使用了一個私有的MPLS（多協議標簽交換）網絡把我們所有的辦公室都連接了起來。”
當然，公司在大文件管理方面的困境不僅僅表現在網絡帶寬的限制。公司下一步要做的就是精心設計數據中心，選擇好的存儲策略，允許快速訪問數據，實現最有效率的資源利用。
Ilion是一家西班牙視頻制作公司，它制作的動畫故事片面向全球市場。Ilion的CTO及技術主管貢薩羅·盧埃達說：“在最忙的時候，我們有超過350名工人。”Ilion平時只需20到40名員工，在忙的時候會增加大量工人，這樣就會有大量的動畫文件，給視頻處理系統帶來非常大的壓力。
他說：“我們雇傭咨詢顧問，并利用多種方法來應對大型文件存儲的需求。比起IOPS是多少，我們對存儲系統的處理能力及吞吐量速度更感興趣。我們需要的解決方案要能滿足我們業務的需求。對我本人來說，這意味著我們要仔細考慮我們的存儲架構，以便能充分適應我們的業務需求。”
最終，Ilion決定升級存儲架構，采用的是雙機頭的BluArc Titan 2200存儲集群。盧埃達說：“在我們活躍的網絡站點上，要處理大約90TB的數據，還有110TB的數據不需要頻繁訪問，就要存儲在歸檔中。我們還要重新定義最好的數據以便實現冗余和熱備份。”
結果就是：聯合使用FC硬盤和SATA硬盤。把元數據及頻繁訪問的數據放在更快，但價格更貴的FC硬盤上，不活躍的數據則被存儲到速度更慢，但是價格便宜的SATA硬盤上。
盧埃達表示：”自從我們采用了這套方案之后，我們的處理速度是原來的3到4倍，我們向FC和SATA硬盤分配數據的做法也表現不錯。這使得我們能承受更大的工作負載，70個動畫師可以同時工作，文件能即時響應。我們系統的可擴展性也大大提高，這種能力是我們不斷增長的業務所需要的。
像Ilion這樣的視頻制作公司有特殊的需求，但是其它的中小企業未必有這樣的需求。同樣的，大企業對帶寬要求很高，而跨國銀行對帶寬的要求就稍低一些，但是，所有的企業都要面對管理大數據文件的挑戰，這是科技發展的必然結果。媒介內容越來越豐富，網絡的使用也越來越頻繁，還有新興的網絡論壇，比如說社交網絡，所有這些都會產生大文件，處理它們都需要相當大的帶寬。
對于企業IT部門來說這意味著什么？這意味著如果現在還沒有做好應對大數據的準備的話，那是時候認真考慮存儲及網絡策略了。數據中心財政保守主義在最近還不會發生什么變化，所有幾乎沒有公司會丟掉目前所有的東西再去買新的。但是，現在就要仔細研究以后的路線圖了，要考慮現有的硬件和軟件資源淘汰周期，還要展望以后的數據中心存儲及帶寬，以及業務發展需求，要不然，現在所做的預算計劃就毫無意義了！