在當今企業中80%的數據都是非結構化數據，這些數據每年都按指數增長60%。大數據將挑戰企業的存儲架構、數據中心的基礎設施等，也會引發數據倉庫、數據挖掘、商業智能、云計算等應用的連鎖反應。未來企業會將更多的TB級（1TB=1024GB）數據集用于商務智能和商務分析。到2020年，全球數據使用量預計將暴增44倍，達到35.2ZB（1ZB=10億TB）。大數據正在徹底改變IT世界。10月幾大科技巨頭的舉動使更多人意識到所謂的高科技泡沫——即“大數據”正在無限的膨脹。

微軟與Hortonworks合作開發Hadoop

早在今年2月，微軟的HPC開發團隊就公布了被稱為“Dryad”的分布式計算平臺。這也標志著微軟向Windows HPC Server用戶提供了能夠進行海量數據處理的工具。微軟推出Dryad的目就是鼓勵開發者們在Windows或者.Net平臺上編寫大規模的并行應用程序。在當時這也被視為微軟在大數據領域與Hadoop對抗的有力產品。

但微軟卻于10月12日在西雅圖舉行的SQL PASS 2011峰會上出乎所有人預料的宣布將與從雅虎分拆出來的Hortonworks合作開發Hadoop，并將在Apache Hadoop上實現搭建Windows Azure以及Windows Server平臺。同時基于Hadoop的Windows Server還會與微軟現有的BI工具聯合處理任務。

微軟與Hortonworks深度合作的目標是借助Hortonworks在此領域的專長幫助***化將Hadoop集成到微軟的產品之中。同時兩家的合作可幫助簡化下載、安裝和配置等幾個Hadoop的相關技術。包括HDFS、Hive、Pig。這將有利于企業通過Hadoop拓寬自身的業務。微軟還將編寫新的ODBC驅動程序并擴展自己現有的查詢系統到Hive。這樣一來用戶將能夠直接從Excel、PowerView執行Hadoop查詢。

Red Monk分析師Stephen O'Grady也很看好Windows和Hadoop的結合。他表示這將是非常具有吸引力的，這將吸引大量的Windows用戶。微軟在此領域具有競爭的實力。

大數據領域 Oracle硬件、軟件齊發力

Oracle作為全球***的關系型數據庫提供商也不甘寂寞，在其產品鏈條中加入了被稱為“NoSQL Database”的NoSQL數據庫。NoSQL Database是Oracle在2011 Oracle全球大會上宣布推出的Oracle Big Data Appliance的一個組成部分。Big Data Appliance是一個集成了Hadoop、NoSQL Database、Oracle數據庫Hadoop適配器、Oracle數據庫Hadoop裝載器及R語言的系統。

而Oracle的在大數據領域的投入還遠不止這些。他們不僅在軟件層面推出了Oracle Big Data Appliance，在硬件層面Oracle還推出Exalytics。Exalytics目標非常明確，就是針對大數據。Oracle推出的In-Memory計算就是在Big Data時代能夠提供海量信息——包括結構化、半結構化、數據集及非結構化數據的分析。同時Exalytics還能夠支持混合的數據源——包括Oracle數據庫、Teradata、微軟SQL Server以及獨立的Essbase數據庫共同使用。

并且Exalytics的硬件和軟件配置也相當強悍：1TB內存和48核心的處理器；支持OBIEE 11g；200GB/s帶寬的TimesTen并行內存數據庫；支持內存并行處理的Essbase OLAP服務器；新的面向高帶寬分析的用戶界面以及最快的連通Exadata的Infiniband連接。

以往，Oracle在云計算領域一直顯得有些保守，但隨著Oracle在此次大會在硬件和軟件兩個層面同時推出強有力的產品。這也標志著Oracle在云計算領域邁出了劃時代的一步。

IBM將DB2與NoSQL數據庫有機結合

[[48958]]

同樣是在10月，在IBM舉辦的IOD 2011大會上，IBM數據庫服務器部門副總裁Curt Cotner宣布IBM將在明年推出內置NoSQL技術的DB2旗艦級數據庫管理系統。

IBM在NoSQL技術領域已具備了一些經驗，其自身的Rational Jazz協作軟件交付平臺就是使用了“triplestore”技術，而“triplestore”技術同NoSQL數據庫中所涉及到的技術大致相同。triplestore技術允許用戶簡潔并快速的檢索元數據和其他相關信息。

不過IBM Rational團隊最終發現triple并不具備其所想要的可用性特征，例如故障轉移、橫向擴展到多個節點等等。IBM Rational團隊發現如果其在短時間內接收大量的triple，NoSQL存儲的索引將會鎖住數據庫。Rational團隊實際上是從開源社區中借用NoSQL triplestore，然后進行修改，使其嵌入到DB2數據庫中，通過這樣的修改將能夠使用DB2索引、日志、高可用性解決方案以及DB2數據庫中所有的功能。

Cotner表示經過修改后的NoSQL功能在DB2數據庫中運行速度將會比之前的開源產品快4倍以上，同時還可以消除可用性以及可擴展性帶來的問題?，F今NoSQL功能還在開發過程中，不過Rational團隊將會在未來為DB2集成更多NoSQL的功能。

大數據在企業的未來

管理大數據的能力將成為那些越來越多地使用新形式信息——比如文本、社交媒體——的企業的核心能力。這種能力將幫助企業尋找***的模式來支持商業決策，即所謂的基于模式的戰略。作為一種變化引擎，基于模式的戰略將充分利用模式尋找流程中所有的維度。然后，它為新商業解決方案的建模提供基礎，讓企業更好地適應新的環境。處理大數據的增長并利用大數據的能力將成為許多企業的優先任務，否則未來幾年他們將受制于這些數據和他們的競爭對手。