與Apache Hadoop的深入合作
微軟的搜索技術(shù)Bing原本就有MapReduce分布式計(jì)算的概念。不過(guò),微軟也選擇了支持越來(lái)越多的企業(yè)開始使用的Apache Hadoop,并作為非結(jié)構(gòu)化數(shù)據(jù)處理架構(gòu)的核心。讓企業(yè)可以在Windows環(huán)境中處理Hadoop平臺(tái)的非結(jié)構(gòu)化數(shù)據(jù)。
“目前我們主要以Windows Server以及Windows Azure兩大平臺(tái)作為基礎(chǔ),同時(shí)和Hortonworks Platform有很好的合作”,孫博凱特別向記者提到:“Hadoop、HDInsight這樣的技術(shù),要采用更加開放的方式與合作伙伴共同推進(jìn)?,F(xiàn)在 包括PHP、MySQL、Wordpress都可以在Windows Azure上運(yùn)行,越來(lái)越多的開源技術(shù)也將出現(xiàn)在微軟的平臺(tái)上”。在現(xiàn)場(chǎng)的技術(shù)演示中,微軟還特別針對(duì)Windows Azure上的Mobile Services和Media Services,演示了Streaming to iOS的過(guò)程。
In-Memory與一體機(jī)共同布局大數(shù)據(jù)
內(nèi)存計(jì)算和一體機(jī)是大數(shù)據(jù)的熱點(diǎn),今年11月SQL Server用戶組主辦的PASS年度峰會(huì)上,微軟副總裁Ted Kummert提出了In-memory Computing是微軟數(shù)據(jù)平臺(tái)交付戰(zhàn)略的核心元素之一,能夠讓用戶分析各種類型的數(shù)據(jù),同時(shí)加速數(shù)據(jù)訪問(wèn)時(shí)間。能夠?qū)?shù)據(jù)直接寫入RAM進(jìn)行操作,從 而消除性能瓶頸。
在Ted Kummert的博客中了解到,微軟從2010年開始,就已經(jīng)在SQL Server中提供In-Memory技術(shù),這個(gè)項(xiàng)目的代碼為“Hekaton”,將作為SQL server的重要升級(jí)模塊來(lái)提供,不過(guò)目前只是作為預(yù)覽版在一小部分用戶中使用。“Hekaton”將會(huì)完善微軟的In-Memomory數(shù)據(jù)組合,同 時(shí)跨越數(shù)據(jù)分析與業(yè)務(wù)交易場(chǎng)景。將會(huì)有突破性的性能提高,而且是內(nèi)置在SQL Server中的,因此企業(yè)不需要額外購(gòu)買專用的硬件或軟件,并且能夠輕松的移植現(xiàn)有應(yīng)用,就能夠讓這些應(yīng)用獲得性能的突破性提升。
“歐洲某一在線博彩網(wǎng)站,當(dāng)一場(chǎng)球賽上演的時(shí)候,可以有上億球迷在線觀看,需要在網(wǎng)上進(jìn)行高復(fù)雜性一系列實(shí)時(shí)操作,他們都想進(jìn)入這個(gè)交易平臺(tái)。 這對(duì)于網(wǎng)站的提供者來(lái)說(shuō)是一個(gè)很大的技術(shù)挑戰(zhàn)”,孫博凱用一個(gè)客戶的實(shí)例展現(xiàn)了內(nèi)存計(jì)算技術(shù)的突破性提升,他談到:“我們通過(guò)內(nèi)存計(jì)算技術(shù),使整個(gè)在線交 易效率提高了15~20倍。Hekaton是一個(gè)拉丁語(yǔ)的名字,是百倍的意思。我們?cè)O(shè)計(jì)這個(gè)技術(shù)最開始的時(shí)候,就希望達(dá)到百倍的效率,雖然現(xiàn)在還沒(méi)有達(dá) 到,不過(guò)我們會(huì)不斷提升In-Memory的技術(shù),希望有更好的突破。”
Ted Kummert在PASS年度峰會(huì)上也提到了微軟并行數(shù)據(jù)倉(cāng)庫(kù)一體機(jī)PDW。是針對(duì)企業(yè)數(shù)據(jù)倉(cāng)庫(kù)、高度可擴(kuò)展而設(shè)計(jì)的軟硬一體機(jī)設(shè)備,采用“大規(guī)模并行處 理”(MPP)體系結(jié)構(gòu)。在數(shù)據(jù)處理方面基于SQL Server 2012的并行數(shù)據(jù)倉(cāng)庫(kù)提供了全新的PolyBase數(shù)據(jù)處理技術(shù),xVelocity 列存儲(chǔ)技術(shù),滿足實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù)的需求,高密度 Direct Attached Storage,存儲(chǔ)容量提升7倍,橫向擴(kuò)展可以實(shí)現(xiàn)從幾個(gè)TB到6PB的線性擴(kuò)展。
關(guān)于數(shù)據(jù)的技術(shù)從未像現(xiàn)在這樣令人著迷,是大數(shù)據(jù)貫穿了應(yīng)用、數(shù)據(jù)中心和云,最終化為一種能力。這種能力為是生活,工作與思維帶來(lái)變革,我們解讀大數(shù)據(jù),也在解讀世界。
上一篇企業(yè)移動(dòng)信息化 巧用BYOD十大方案
下一篇專家預(yù)測(cè):2013年五大云計(jì)算趨勢(shì)
感谢您访问我们的网站,您可能还对以下资源感兴趣:
噜噜噜综合