繼SQL Server后，微軟終于全面加入了Hadoop陣營！

在10月12日的西雅圖舉行的SQL PASS 2011峰會上，微軟宣布將于從雅虎分拆出來的Hortonworks合作開發(fā)，在Apache Hadoop上實(shí)現(xiàn)搭建Windows Server以及Windows Azure平臺。Hortonworks作為微軟的戰(zhàn)略合作伙伴將會借助自己在此領(lǐng)域的專長幫助最大化將Hadoop集成到微軟的產(chǎn)品之中。

微軟表示預(yù)計在今年年底可推出基于Hadoop的Windows Azure預(yù)覽版，而基于Hadoop的Windows Server將在在2012年推出。基于Hadoop的Windows Server還會與微軟現(xiàn)有的BI工具聯(lián)合處理任務(wù)。同時微軟官方還證實(shí)了SQL Server “Denali”將被正式命名為SQL Server 2012。

微軟商業(yè)平臺事業(yè)部高級副總裁Ted Kummert在一份聲明中表示此舉將幫助微軟的客戶更好的管理自己的大數(shù)據(jù)。越來越多的公司正在尋找收集和分析非結(jié)構(gòu)化數(shù)據(jù)以幫助自身洞察業(yè)務(wù)的方法。但迄今為止，由于傳統(tǒng)關(guān)系數(shù)據(jù)庫主要是為處理結(jié)構(gòu)化數(shù)據(jù)而設(shè)計的，其自身固有的特性導(dǎo)致可擴(kuò)展性不佳。而Hadoop作為一個開源框架對大數(shù)據(jù)的支持正日益吸引IT主管的目光，Hadoop非常適合處理非結(jié)構(gòu)化數(shù)據(jù)，如電子郵件內(nèi)的內(nèi)容、博客、點(diǎn)擊帶來的流數(shù)據(jù)、音頻及視頻等數(shù)據(jù)。

如雅虎、AOL、谷歌、Facebook等早期采用并使用Hadoop來存儲和分析PB級別的非結(jié)構(gòu)化數(shù)據(jù)。其他企業(yè)的數(shù)據(jù)倉庫技術(shù)尚不具備處理這些任務(wù)的能力。Gartner分析師Merv Adrian表示這樣看來微軟與Hortonworks的聯(lián)盟就不足為奇了。同時他認(rèn)為Cloudera是當(dāng)今Hadoop的領(lǐng)導(dǎo)者。

當(dāng)然其他巨頭也紛紛有所行動。一周前甲骨文也推出了基于Hadoop的大數(shù)據(jù)設(shè)備以及甲骨文自己的NoSQL數(shù)據(jù)庫和基于開源語言R的分布式數(shù)據(jù)統(tǒng)計分析系統(tǒng)。就在幾天前IBM宣布將收購私營的系統(tǒng)軟件公司Platform Computing。此舉可幫助IBM將更好地為客戶提供服務(wù)，幫助它們以更適當(dāng)?shù)姆绞焦芾聿⒎治龃笠?guī)模數(shù)據(jù)，降低成本和系統(tǒng)復(fù)雜度。

此刻微軟自然不會無動于衷，其與Hortonworks的合作旨在努力簡化下載、安裝和配置等幾個Hadoop的相關(guān)技術(shù)。包括HDFS、Hive、Pig。這將有利于企業(yè)通過Hadoop拓寬自身的業(yè)務(wù)。微軟將編寫新的ODBC驅(qū)動程序并擴(kuò)展自己現(xiàn)有的查詢系統(tǒng)到Hive。這樣一來用戶將能夠直接從Excel、PowerView執(zhí)行Hadoop查詢。微軟已經(jīng)宣布的為Excel編寫的BI插件被稱之為PowerPivot。同時微軟還將加大對JavaScript語言的投入，微軟將使用JavaScript實(shí)現(xiàn)高性能的Map/Reduce。微軟承諾將緊密與Hadoop社區(qū)合作并積極為Apache軟件基金會的項(xiàng)目作出自身的貢獻(xiàn)。

SQL Server產(chǎn)品管理總經(jīng)理Doug Leland表示微軟計劃是使Hadoop的數(shù)據(jù)通過部署在基于云的Windows Azure獲取。并使其能夠與企業(yè)的商業(yè)智能工具一起分析數(shù)據(jù)。微軟還將Active Directory的安全性和數(shù)據(jù)訪問控制整合進(jìn)Hadoop，以提供最大的可管理性，真正使我們的平臺具有良好的競爭力。

微軟NoSQL數(shù)據(jù)庫Trinity架構(gòu)圖

Hortonworks的CEO Eric Baldeschwieler表示，當(dāng)今生成的新數(shù)據(jù)中，超過80%都是非結(jié)構(gòu)化數(shù)據(jù)。微軟與Hortonworks的合作可使Hadoop成為用于存儲和處理數(shù)據(jù)的引人注目的平臺。其實(shí)早在8月微軟就增加了SQL Server在大規(guī)模數(shù)據(jù)處理和并行數(shù)據(jù)倉庫平臺對開源Hadoop框架的支持。同時連接器的最終版本已提供下載。然后遠(yuǎn)不止這些，微軟早在今年3月份就發(fā)布了其圖數(shù)據(jù)庫系統(tǒng)Trinity。Trinity是一款NoSQL數(shù)據(jù)庫，同時是一個基于內(nèi)存的數(shù)據(jù)存儲與運(yùn)算系統(tǒng)。Trinity包括一個圖結(jié)構(gòu)數(shù)據(jù)庫（提供實(shí)時查詢與后臺批量計算任務(wù)，類似于Map/Reduce，同時支持ACI的事物并提供C＃的客戶端API）和一個并行計算系統(tǒng)。目前在微軟為Probase和AEther這兩個產(chǎn)品服務(wù)。

最后Red Monk分析師Stephen O'Grady表示W(wǎng)indows和Hadoop的結(jié)合將是非常具有吸引力的，這將吸引大量的Windows用戶。顯然這是非常重要的，微軟具有在此領(lǐng)域競爭的實(shí)力。微軟明顯認(rèn)為優(yōu)化和調(diào)整是確保其成功的重要因素。