新存儲技術革命性處理數(shù)據泛濫問題
wangfei 發(fā)表于：13年05月28日 10:28 [編譯] DOIT.com.cn
軟件加商品硬盤
在線營銷SaaS供應商Constant Contact也打算由所有權硬件和軟件解決方案轉向軟件控制的商品硬盤。
公司首席技術官斯特凡皮舍（Stefan Piesche）稱：“當我在3年半之前加入公司的時候，我們擴展存儲容量的主要方法是購買數(shù)量更多、速度更快的存儲設備和數(shù)據庫服務器。”雖然存儲需求仍以每年15%到25%的速度遞增，但是為了降低成本，他打算從基于3PAR的SAN設備的IBM DB2數(shù)據庫轉向基于戴爾服務器、商品磁盤和Fusion-io閃存卡的開源MySQL和Cassandra NoSQL數(shù)據庫。
他說，這個新的平臺不但在速度上比之前的存儲平臺快了不止一個數(shù)量級，而且在性能、可用率和災難恢復上也有明顯地提升，而且不會增加管理難度和成本。新平臺可以將數(shù)據寫入六個存儲節(jié)點，從而提高存儲性能，這意味著同樣的數(shù)據會保留多份副本。 然而皮舍同時也說，商品硬盤和服務器在價格上具有非常顯著的優(yōu)勢。
他還指出，他的客戶不會因為儲存在那些副本中的營銷數(shù)據在存取上出現(xiàn)幾毫秒的延時而蒙受損失，但是對于價格一直處于變化之中的財務交易系統(tǒng)來說，情況可能并不是那樣。
他說，分拆數(shù)據庫也有助于Constant Contact輕松實現(xiàn)擴容。他說：“我們可以將客戶分組分批地放在不同的數(shù)據庫上，而那些數(shù)據庫通常是具有相同縮略圖的同一數(shù)據庫的多個實例。 我們希望那些數(shù)據庫是吻合的，而且可以在商品硬件上運行，以降低我們的經營成本，因此再弄一個新的數(shù)據庫其實是毫無實際意義的。公司現(xiàn)有5萬多客戶，我們增加了兩臺基于MySQL的商品數(shù)據庫服務器，結果用戶們的性能不會受到其他用戶的影響。”
這個領域的另一家廠商CommVault稱，它的Simpana軟件平臺可以將存儲成本最多削減50%，將管理間接費最多削減80%，將每年的支持服務費用最多削減35%，因為需要儲存的數(shù)據副本總數(shù)以及需要購買和維護的存儲應用程序的數(shù)量都比以前減少了。
Sanbolic聲稱，它的Melio 5數(shù)據管理平臺可以提供高可用率、基于共享數(shù)據服務器群集的應用擴展性、支持各種工作負載中的任何大小尺寸的文件的快速存取等功能，而且可以擴展成超過2000個物理或虛擬結點以及最多6.5萬臺存儲設備的規(guī)模。它的Latency Targeted Allocator軟件允許Melio平臺在存儲陣列內部共享服務器一端的閃存資源和固態(tài)硬盤，還可以跨結點共享傳統(tǒng)硬盤。 公司首席執(zhí)行官、聯(lián)合創(chuàng)始人Momchil Michailov稱，這就避免了單一故障點和數(shù)據及應用倉庫數(shù)據存取難的問題。
有些新廠商將它們的軟件與配備硬盤和處理器的物理硬件包裝在一起。Gridstore的存儲設備可以將存儲控制器和數(shù)據虛擬化，以消除單一故障點的問題，并且讓系統(tǒng)可以更快地從許多服務器中讀取并行數(shù)據。 這會令控制器的數(shù)量增加，使用那些沒有被用到的計算能力來提高性能和容量。 然而，它現(xiàn)在不僅支持Windows，而且還支持基于文件的存儲方案。
另一種基于軟件的擴展方案是將數(shù)據分割成無數(shù)的小塊，分布在許多物理數(shù)據庫上。Cleversafe的dsNet技術與PB級容量的存儲設備配套使用最好，而且那些存儲數(shù)據全部是由50到100KB的對象組成的。 公司總裁兼首席執(zhí)行官克里斯格萊德溫（Chris Gladwin）稱，這個解決方案最適用于在線照片共享等應用。
下一個是什么
隨著硬盤的容量越來越大速度越來越快，閃存硬盤的容量和可靠性也在增加，加上開源存儲技術日漸成熟，某些業(yè)內觀察員發(fā)現(xiàn)企業(yè)組織處理數(shù)據增長的方法也發(fā)生了根本性的變化。
隨著新的非易失性存儲技術得到推廣采用，在固態(tài)硬盤和傳統(tǒng)硬盤之間對數(shù)據進行分級的需求也沒有以前那么強烈了，因為新技術在成本上的競爭力已經勝過了更為高端的光纖通道和SAS硬盤。但是謝蒂認為，容量相對較大、價格相對較低的SATA硬盤仍有用武之地，但是裝配上的復雜性和不同的軟件接口會導致用戶不想在同一個系統(tǒng)中使用混合存儲設備。
Hitachi Data Systems的首席技術官Hu Yoshida稱，閃存硬盤的價格將在3到5年內降低到與高性能硬盤相當?shù)膬r位水平上。他說，它們的競爭力已經相當了，傳統(tǒng)硬盤的容量因為短行程（short-stroking）和在RAID數(shù)據保護配置下跨多磁盤寫入數(shù)據而減少了一些。
但是即便是商品硬盤的存取速度也會增加，因為廠商們在那些產品上添加了更多的高速緩存。希捷預計這種混合硬盤將在2015年之前被應用到它的大多數(shù)產品線中。
云存儲服務將提供速度較慢但價格極其低廉的歸檔服務，以降低內部存儲設備的存儲負荷。例如，Amazon Glacier服務的價格低至每月每GB 1美分。 顧問公司StorageIO的創(chuàng)始人Greg Schulz稱，雖然檢索數(shù)據可能要花3到5個小時的時間，但那可能并不會比從磁帶存儲器中恢復數(shù)據所花的時間更長。從價格方面來說，Glacier的競爭力不會比磁帶差。
格萊德溫稱：“對象存儲技術可以通過消除分級文件系統(tǒng)的需求來降低存儲成本和復雜性。在一個非常龐大的數(shù)據存儲系統(tǒng)中，運行文件系統(tǒng)需要增加服務器的數(shù)量，而那會增加能源成本、占地空間和直接成本。 他說，利用對象存儲技術，象社交媒體網站那樣的應用不用使用文件系統(tǒng)也能搜索好友。
與此同時，IT商店將繼續(xù)青睞具有成本效益、由廉價硬件和廉價開源軟件的云解決方案。
例如，Constant Contact認為私有存儲云也許會使用開源軟件來降低成本和提供無限的可擴展性。皮舍說，使用Cassandra，他愿意將存儲群集分散到很多分布式數(shù)據中心以實現(xiàn)災難恢復的功能，這樣就不會產生任何的許可證費用，而且不需要任何復雜的設置和人工干預。
他需要的復制功能還沒有實現(xiàn)，但是他必須不斷去尋找，因為正如舒爾茨所說的，對于絕大多數(shù)人來說，絕對不會出現(xiàn)數(shù)據減少的情況。
