大數(shù)據(jù)應(yīng)用開發(fā)的12個輔助開發(fā)工具
在大數(shù)據(jù)應(yīng)用的開發(fā)中， 除了基礎(chǔ)的Hadoop或者R語言之外，還有很多優(yōu)秀的輔助開發(fā)工具， 能使開發(fā)者如虎添翼。
就像當年的舊金山淘金熱時， ***掙錢的除了淘金者， 還有Levi’s這樣的做牛仔褲的和那些給淘金這賣水的人，在現(xiàn)在的大數(shù)據(jù)淘金熱里， 也出現(xiàn)了很多提供開發(fā)工具或者開發(fā)環(huán)境的公司。 下面介紹12個公司和他們的工具， 無論你是從事大數(shù)據(jù)應(yīng)用的開發(fā)，還是希望分析你的移動應(yīng)用，這些工具都可以幫助你更好的淘金。
1) BitDeli
BitDeli是一家剛剛成立的公司， 他的產(chǎn)品就是可以讓開發(fā)者利用Python腳本， 對應(yīng)用進行分析。 Python腳本可以很簡單， 也可以很復(fù)雜。 一切可以由開發(fā)者來定制。 BitDeli的產(chǎn)品甚至包含了一些機器學(xué)習(xí)的模塊。相比較龐大的Hadoop分析工具， BitDeli把自己比作是應(yīng)用分析方面的RoR (Ruby on Rail)。
2) Continuity
Continuity的兩個創(chuàng)始人是雅虎的前***云架構(gòu)師Todd Papaioannou和前Facebook的HiBase工程師 Jonathan Gray。 他們的目的， 就是想使客戶能夠像雅虎和Facebook
利用大數(shù)據(jù)。 Continuity的產(chǎn)品App Fabric主要是把復(fù)雜的與Hadoop和HBase集群的工作作為一個抽象層， 提供各種大數(shù)據(jù)開發(fā)工具， 來滿足企業(yè)內(nèi)部或外部數(shù)據(jù)需求。
#p#
3) Flurry
Flurry是個一站式的移動應(yīng)用商店， 它每年已經(jīng)有100美元的營收了。 它不但幫助開發(fā)者在它的平臺上開發(fā)，還可以幫助開發(fā)者通過運營數(shù)據(jù)， 對應(yīng)用進行分析以改善應(yīng)用。 而且， Flurry平臺還可以和廣告網(wǎng)絡(luò)相對接， 幫助開發(fā)者更好的實現(xiàn)盈利。
4) Google Predictive API
在Google提供的眾多開發(fā)工具中， Google Predictive API 是最酷的一個了。如果你有好的訓(xùn)練樣本數(shù)據(jù)， 那么Google Predictive API將會利用機器學(xué)習(xí)算法來為你的應(yīng)用建立模型，并把這些模型整合到你的應(yīng)用中去。 在Google給出的例程里， 包括了反垃圾郵件， 推薦引擎， 以及情緒分析等模型的搭建步驟和代碼。
#p#
5) Infochimps
盡管Infochimps把自己定義為面向企業(yè)的IT平臺， 他們大數(shù)據(jù)平臺對開發(fā)者來說也非常有幫助。它的技術(shù)平臺叫做Wukong(悟空)， 用來進行大數(shù)據(jù)環(huán)境的配置和管理。 從起一個Hadoop進程到用Ruby腳本來傳遞數(shù)據(jù)流。 Wukong都可以讓開發(fā)者的工作變得更簡單。 此外， Infochimps的平臺還包括了一個數(shù)據(jù)市場，以API或者下載方式提供各類數(shù)據(jù)。
6) Keen IO
Keen IO是個強大的移動應(yīng)用分析工具。 開發(fā)者只需要簡單到一行代碼， 就可以跟蹤他們想要的關(guān)于他們應(yīng)用的任何信息。開發(fā)者接下來只需要做一些Dashboard或者查詢的工作就可以了。
#p#
7)Kontagent
Kontagent是一個移動， 社交， 網(wǎng)站應(yīng)用的分析平臺。 它基于Hadoop大數(shù)據(jù)平臺而建。 今年， Kontagent平臺增添了新功能。 它可以讓用戶直接采用Hive查詢語言對數(shù)據(jù)進行任意查詢和分析，而不像原來那樣只能進行預(yù)定義的查詢和分析
8) Mortar Data
Mortar Data是專為開發(fā)者打造的Hadoop開發(fā)平臺，它用Pig 和Python的組合替代了MapReduce以便開發(fā)者能簡單地編寫Hadoop管道(Pipeline)。 今年11月， 它推出了Mortar Data開源開發(fā)框架， 利用開源社區(qū)來推動數(shù)據(jù)共享。 Mortar Data平臺運行在亞馬遜的云平臺上。 支持亞馬遜S3 以及MangoDB。 #p#
9) Placed Analytics
利用腳本語言以及API， Placed Analytics能夠提供針對移動和網(wǎng)絡(luò)應(yīng)用的詳細用戶行為分析。包括， 用戶使用時間和地理位置信息。 這些可以幫助開發(fā)者的應(yīng)用更好地吸引廣告商， 也可以幫助開發(fā)者對自己的應(yīng)用進行改善。
10) Precog
Precog提供的是一個基于開源查詢語言Quirrel的交互式開發(fā)環(huán)境， 名為Labcoat?？梢詭椭_發(fā)者進行應(yīng)用分析的開發(fā)。 這個IDE環(huán)境還提供了關(guān)于Quirrel的教程，以及其他一些復(fù)雜的函數(shù)。 用公司***運營官Jeff Carr的話來說：“就算是一個非技術(shù)人員， 幾個小時也能掌握基本功能。” #p#
11) Spring For Apache Hadoop
盡管Hadoop是用Java寫的， 但是這并不意味著， 在Hadoop上編程或者使用Hadoop對Java程序員來說就很簡單。因此， 在2012年初， SpringSource宣布推出了Spring For Apache Hadoop項目。 把Spring開發(fā)框架和Hadoop結(jié)合起來。 這樣也便于其他的Spring應(yīng)用或者基于Java虛擬機的腳本， 更好地和Hadoop以及利用Hadoop的其他技術(shù)如Hive或者HBase進行整合。
12) StatMix
和BitDeli以及Keen IO一樣， StatMix也希望能夠使開發(fā)者用他們所熟知的語言來進行數(shù)據(jù)查詢與分析。 因此， 出來提供預(yù)定義的查詢之外， StatMix也提供API和代碼庫來讓開發(fā)者定制化的查詢。 并可以把不同數(shù)據(jù)源的查詢結(jié)果整合在一個定制的Dashboard里。
原文鏈接：http://www.ctocio.com/ccnews/10394.html
