新存儲技術(shù)革命性處理數(shù)據(jù)泛濫問題
wangfei 發(fā)表于:13年05月28日 10:28 [編譯] DOIT.com.cn
軟件加商品硬盤
在線營銷SaaS供應(yīng)商Constant Contact也打算由所有權(quán)硬件和軟件解決方案轉(zhuǎn)向軟件控制的商品硬盤。
公司首席技術(shù)官斯特凡皮舍(Stefan Piesche)稱:“當我在3年半之前加入公司的時候,我們擴展存儲容量的主要方法是購買數(shù)量更多、速度更快的存儲設(shè)備和數(shù)據(jù)庫服務(wù)器。”雖然存儲需求仍以每年15%到25%的速度遞增,但是為了降低成本,他打算從基于3PAR的SAN設(shè)備的IBM DB2數(shù)據(jù)庫轉(zhuǎn)向基于戴爾服務(wù)器、商品磁盤和Fusion-io閃存卡的開源MySQL和Cassandra NoSQL數(shù)據(jù)庫。
他說,這個新的平臺不但在速度上比之前的存儲平臺快了不止一個數(shù)量級,而且在性能、可用率和災(zāi)難恢復(fù)上也有明顯地提升,而且不會增加管理難度和成本。新平臺可以將數(shù)據(jù)寫入六個存儲節(jié)點,從而提高存儲性能,這意味著同樣的數(shù)據(jù)會保留多份副本。 然而皮舍同時也說,商品硬盤和服務(wù)器在價格上具有非常顯著的優(yōu)勢。
他還指出,他的客戶不會因為儲存在那些副本中的營銷數(shù)據(jù)在存取上出現(xiàn)幾毫秒的延時而蒙受損失,但是對于價格一直處于變化之中的財務(wù)交易系統(tǒng)來說,情況可能并不是那樣。
他說,分拆數(shù)據(jù)庫也有助于Constant Contact輕松實現(xiàn)擴容。他說:“我們可以將客戶分組分批地放在不同的數(shù)據(jù)庫上,而那些數(shù)據(jù)庫通常是具有相同縮略圖的同一數(shù)據(jù)庫的多個實例。 我們希望那些數(shù)據(jù)庫是吻合的,而且可以在商品硬件上運行,以降低我們的經(jīng)營成本,因此再弄一個新的數(shù)據(jù)庫其實是毫無實際意義的。公司現(xiàn)有5萬多客戶,我們增加了兩臺基于MySQL的商品數(shù)據(jù)庫服務(wù)器,結(jié)果用戶們的性能不會受到其他用戶的影響。”
這個領(lǐng)域的另一家廠商CommVault稱,它的Simpana軟件平臺可以將存儲成本最多削減50%,將管理間接費最多削減80%,將每年的支持服務(wù)費用最多削減35%,因為需要儲存的數(shù)據(jù)副本總數(shù)以及需要購買和維護的存儲應(yīng)用程序的數(shù)量都比以前減少了。
Sanbolic聲稱,它的Melio 5數(shù)據(jù)管理平臺可以提供高可用率、基于共享數(shù)據(jù)服務(wù)器群集的應(yīng)用擴展性、支持各種工作負載中的任何大小尺寸的文件的快速存取等功能,而且可以擴展成超過2000個物理或虛擬結(jié)點以及最多6.5萬臺存儲設(shè)備的規(guī)模。它的Latency Targeted Allocator軟件允許Melio平臺在存儲陣列內(nèi)部共享服務(wù)器一端的閃存資源和固態(tài)硬盤,還可以跨結(jié)點共享傳統(tǒng)硬盤。 公司首席執(zhí)行官、聯(lián)合創(chuàng)始人Momchil Michailov稱,這就避免了單一故障點和數(shù)據(jù)及應(yīng)用倉庫數(shù)據(jù)存取難的問題。
有些新廠商將它們的軟件與配備硬盤和處理器的物理硬件包裝在一起。Gridstore的存儲設(shè)備可以將存儲控制器和數(shù)據(jù)虛擬化,以消除單一故障點的問題,并且讓系統(tǒng)可以更快地從許多服務(wù)器中讀取并行數(shù)據(jù)。 這會令控制器的數(shù)量增加,使用那些沒有被用到的計算能力來提高性能和容量。 然而,它現(xiàn)在不僅支持Windows,而且還支持基于文件的存儲方案。
另一種基于軟件的擴展方案是將數(shù)據(jù)分割成無數(shù)的小塊,分布在許多物理數(shù)據(jù)庫上。Cleversafe的dsNet技術(shù)與PB級容量的存儲設(shè)備配套使用最好,而且那些存儲數(shù)據(jù)全部是由50到100KB的對象組成的。 公司總裁兼首席執(zhí)行官克里斯格萊德溫(Chris Gladwin)稱,這個解決方案最適用于在線照片共享等應(yīng)用。
下一個是什么
隨著硬盤的容量越來越大速度越來越快,閃存硬盤的容量和可靠性也在增加,加上開源存儲技術(shù)日漸成熟,某些業(yè)內(nèi)觀察員發(fā)現(xiàn)企業(yè)組織處理數(shù)據(jù)增長的方法也發(fā)生了根本性的變化。
隨著新的非易失性存儲技術(shù)得到推廣采用,在固態(tài)硬盤和傳統(tǒng)硬盤之間對數(shù)據(jù)進行分級的需求也沒有以前那么強烈了,因為新技術(shù)在成本上的競爭力已經(jīng)勝過了更為高端的光纖通道和SAS硬盤。但是謝蒂認為,容量相對較大、價格相對較低的SATA硬盤仍有用武之地,但是裝配上的復(fù)雜性和不同的軟件接口會導(dǎo)致用戶不想在同一個系統(tǒng)中使用混合存儲設(shè)備。
Hitachi Data Systems的首席技術(shù)官Hu Yoshida稱,閃存硬盤的價格將在3到5年內(nèi)降低到與高性能硬盤相當?shù)膬r位水平上。他說,它們的競爭力已經(jīng)相當了,傳統(tǒng)硬盤的容量因為短行程(short-stroking)和在RAID數(shù)據(jù)保護配置下跨多磁盤寫入數(shù)據(jù)而減少了一些。
但是即便是商品硬盤的存取速度也會增加,因為廠商們在那些產(chǎn)品上添加了更多的高速緩存。希捷預(yù)計這種混合硬盤將在2015年之前被應(yīng)用到它的大多數(shù)產(chǎn)品線中。
云存儲服務(wù)將提供速度較慢但價格極其低廉的歸檔服務(wù),以降低內(nèi)部存儲設(shè)備的存儲負荷。例如,Amazon Glacier服務(wù)的價格低至每月每GB 1美分。 顧問公司StorageIO的創(chuàng)始人Greg Schulz稱,雖然檢索數(shù)據(jù)可能要花3到5個小時的時間,但那可能并不會比從磁帶存儲器中恢復(fù)數(shù)據(jù)所花的時間更長。從價格方面來說,Glacier的競爭力不會比磁帶差。
格萊德溫稱:“對象存儲技術(shù)可以通過消除分級文件系統(tǒng)的需求來降低存儲成本和復(fù)雜性。在一個非常龐大的數(shù)據(jù)存儲系統(tǒng)中,運行文件系統(tǒng)需要增加服務(wù)器的數(shù)量,而那會增加能源成本、占地空間和直接成本。 他說,利用對象存儲技術(shù),象社交媒體網(wǎng)站那樣的應(yīng)用不用使用文件系統(tǒng)也能搜索好友。
與此同時,IT商店將繼續(xù)青睞具有成本效益、由廉價硬件和廉價開源軟件的云解決方案。
例如,Constant Contact認為私有存儲云也許會使用開源軟件來降低成本和提供無限的可擴展性。皮舍說,使用Cassandra,他愿意將存儲群集分散到很多分布式數(shù)據(jù)中心以實現(xiàn)災(zāi)難恢復(fù)的功能,這樣就不會產(chǎn)生任何的許可證費用,而且不需要任何復(fù)雜的設(shè)置和人工干預(yù)。
他需要的復(fù)制功能還沒有實現(xiàn),但是他必須不斷去尋找,因為正如舒爾茨所說的,對于絕大多數(shù)人來說,絕對不會出現(xiàn)數(shù)據(jù)減少的情況。
公司簡介 | 媒體優(yōu)勢 | 廣告服務(wù) | 客戶寄語 | DOIT歷程 | 誠聘英才 | 聯(lián)系我們 | 會員注冊 | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.