阿明 發(fā)表于:13年10月29日 11:21 [原創(chuàng)] DOIT.com.cn
2013年10月29日存儲在線原創(chuàng):一個公司的誕生對整個IT業(yè)界都是一次大大的刺激與促進,對于這樣一家定位下一代云計算和大數據應用相結合的公司,傾注了老喬(Joe Tucci)為首的EMC高層決策團的睿見與前瞻。
從當初成立伊始將VMware前任CEO、EMC首席戰(zhàn)略官Paul Maritz換將到Pivotal,EMC和VMware共同出資成立的公司(通用電氣也有1.05億美元左右的戰(zhàn)略投資)被國內媒體業(yè)界譽為EMC集團軍的三駕馬車之一。(另兩駕馬車:軟件定義數據中心的VMWare和信息基礎架構的原EMC)
“據Paul Maritz透露,2013年Pivotal的銷售收入預計為3億美元,2017年有望達到10億美元。同時2013~2014年Pivotal將獲得約4億美元的投資。” Pivotal在既定目標的推動下,近來也傳出“忙于打造大數據軟件組合”——組合數據挖掘和數據分析軟件產品。
作為下狠心要鍛造自己的業(yè)務智能PaaS(平臺即服務),Pivotal在大數據軟件方面也強調如何有助于數據分析。大家都熟知的,內存數據庫技術的應用,可以大大提高數據庫的速度,這對于需要高速反應的數據庫應用,如電信、金融等提供了有力支撐。因此,在內存數據庫的實時分析領域,就成為當前在配合Hadoop平臺數據處理方面帶來很大的方便。
我們可以簡單了解一下內存數據庫的價值所在,“內存數據庫的技術,一個很重要的特點,是可以對內存中的數據實現全事務處理,這是僅僅把數據以數組等形式放在內存中完全不同的。并且,內存數據庫是與應用無關的,顯然這種體系結構具有其合理性。內存引擎可以實現查詢與存檔功能使用的是完全相同的數據庫,同時內存表與磁盤表也使用的是完全相同的存取方法。存儲的選擇,對于應用開發(fā)者而言是完全透明的。”
相關資料顯示:對于內存數據庫而言,實現了數據在內存中的管理,而不僅僅是作為數據庫的緩存。不像其它將磁盤數據塊緩存到主存中的數據庫,內存數據庫的內存引擎使用了為隨機訪問內存而特別設計的數據結構和算法,這種設計使其避免了因使用排序命令而經常破壞緩存數據庫性能的問題。通過內存數據庫,減少了磁盤I/O,能夠達到了以磁盤I/O 為主的傳統(tǒng)數據庫無法與其相比擬的處理速度。
顯然,內存數據庫在解決實時處理和高并發(fā)問題上,其意義還是非常大的。
作為Hadoop發(fā)行版升級Pivotal HD 1.1的一部分,其中還包括內存交易庫GemFire HD(就是VMware在2010年收購的)。據其他媒體介紹,“GemFire實例完全是在服務器內存中運行的,這樣可以迅速詢問實時SQL操作數據,對于情況感知和其他形式的實時分析都是有用處的。”
另外,在新加坡的首屆Pivotal峰會上,Pivotal還在推出了幫助數據工作者發(fā)現和準備數據用于分析的工具——Pivotal Data Dispatch(Pivotal DD)。Pivotal DD是一款可擴展、經濟實惠的解決方案,可整合查看不同的數據源,為報告和數據分析提供自助式沙箱配置。企業(yè)現在可以快速、安全地提供任何數據源,無論是Hadoop、MPP、平面文件還是傳統(tǒng)數據庫的結構化和非結構化大數據,使數據工作者能夠實現前所未有的數據分析高產出。采用Pivotal DD,企業(yè)就有了一個全面的系統(tǒng),可以查看、管理和分析組織內部及外部數據,更快做出決策,為企業(yè)開發(fā)出關鍵的數據洞察。
不過,據介紹,Pivotal Data Dispatch軟件的基礎是由紐約證券交易所(New York Stock Exchange,NYSE)開發(fā)的,從2007年開始他們的數據分析師利用這款軟件更好地了解監(jiān)管要求帶來的影響,也旨在為滿足監(jiān)管要求而跨多種數據架構進行高級數據訪問和分析。經過與NYSE科技公司協(xié)調,Pivotal已經將這個先進的基礎軟件納入一個稱為Pivotal Data Dispatch的商業(yè)產品,以滿足Pivotal企業(yè)客戶群日益增長的數據需求。
有媒體對此評論道:“Pivotal DD為大數據和分析掃清了障礙,通過自助式數據發(fā)現和訪問提高速度。通過統(tǒng)一訪問控制、增強策略和審計功能提高安全性與合規(guī)性。通過減少IT參與穩(wěn)定成本,管控租用沙箱導致的數據增長,提高效率。”
查閱資料發(fā)現,Pivotal DD還提供如下功能:
統(tǒng)一數據平臺:這是一個不同數據平臺的目錄,使IT部門能夠注冊數據平臺、定義業(yè)務元數據、建立安全和訪問規(guī)則并執(zhí)行各種政策。
面向Hadoop及其他系統(tǒng)的數據管理:快速訪問企業(yè)數據池——一種電子文件圖書館和數據庫系統(tǒng)。系統(tǒng)還可以包括基于Hadoop的平臺、數據網格和高速緩存服務、MPP專用設備、信息隊列以及內部或外部云。
自配置:建立按需分析沙箱和規(guī)定時間的數據租用,所規(guī)定時間由數據工作者和數據經理設置。
安全與訪問控制:單一元數據庫用于實現統(tǒng)一訪問、安全性、譜系追蹤以及IT管理員的可審計性。
再者,從另一個方面分析,“目前用Hadoop的企業(yè)為數不多。但我們可以感受到,有些企業(yè)已經先行。”Pivotal全球業(yè)務發(fā)展與策略副總裁David Menninger早已認識到這一點,實際上,在國內幾次有關Hadoop的大會現場與會者爆滿就可以看出國內企業(yè)用戶對于Hadoop技術的關心與專注度。
相關數據顯示,Pivotal現有1200人,700人都是工程師,在面臨下一代云計算和大數據應用相結合的道路上,Pivotal 已經在步步搶先,阿明相信它未來將會做得更好。
也如David Menninger 所言:“Pivotal 代表著轉變,新時代需要新平臺。” 因此,我們不得不看好未來的Pivotal。(阿明)