成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

MapReduce朝不保夕的江湖地位

大數據
MapReduce已經不再像以往那么重要,就像一個古老的蒸汽引擎被迫讓位于更時尚的柴油機車一樣。用一位發言人的話說,“擺脫MapReduce,盡快和盡可能多地擺脫。”

可憐的MapReduce,直到2013年末,都是Hadoop系統中的關鍵一環,在這個開源大數據處理框架中,它既是集群的資源管理器,又作為主要編程手段和處理環境存在。但如今看來,情況正在發生變化。

Apache Software Foundation的Hadoop 2版本添加了一個名叫YARN的新技術,取代了MapReduce的資源管理角色,并將Hadoop發展成了超越MapReduce批處理作業的應用程序。目前有很多廠商推出了SQL-on-Hadoop工具,讓用戶編寫針對Hadoop數據分析查詢的標準SQL,以代替MapReduce。Spark 處理引擎也應運而生,其支持者聲稱它運行批處理作業的速度比MapReduce快100多倍,并且支持時下流行的高級編程語言,如Java和Python 等。

隨著上述新興技術的出現,MapReduce已經不再像以往那么重要,就像一個古老的蒸汽引擎被迫讓位于更時尚的柴油機車一樣。這個現實在紐約 Strata + Hadoop World 2015 會議后更為凸顯,在此次會議中,與會者廣泛討論了擺脫MapReduce的議題。用一位發言人的話說,“擺脫MapReduce,盡快和盡可能多地擺脫。”

MapReduce Geospatial 的出現,將這一“去MapReduce化”的情緒推向了頂峰,它是一個開源工具包,用于處理衛星圖像和其他大型的柵格數據集。它促使開發者轉變原有被稱為 MrGeo的開發技術,從MapReduce轉而使用Spark。這樣做的結果是獲得了更高的性能,且代碼庫容量減少了25%,衛星成像分析公司(DigitalGlobe)的分析主管Smith 承認,是時候為工具包起一個新的名字了。

不僅僅是MapReduce, HDFS (Hadoop分布式文件系統)——Hadoop的其他核心組成部分的代表,也有可能被取代。在Strata 會議上,Hadoop供應分銷商的領頭羊Cloudera公布了一種名為Kudu的柱狀數據存儲,作為HDFS在實時流數據分析方面的一個潛在替代技術。 Hortonworks,另一個Hadoop供應商,推出了一個單獨的軟件來管理不同系統之間的數據流,HDFS的地位受到了威脅。

MapReduce和HDFS很快就會消失。盡管目前有很多應用程序基于二者構建,大量的Hadoop用戶仍會使用它們來完成一些大數據處理的需要。但以后部署Hadoop系統將不再需要這兩種技術的情況將不可避免。

他們真的還會是Hadoop集群嗎?這是一個生死攸關的問題。但Hadoop的進化,或者身份危機也許是大數據時代帶來的易變性數據管理環境所引發變革的一個縮影。各種關系數據庫和SQL一枝獨秀的時代一去不返了。我們生活在一個多元的世界,這個世界存在各種技術,滿足著不同的數據處理和分析的需要。當然關系型軟件也在其中,此外還包括由Hadoop,Spark,NoSQL數據庫以及其他大數據工具組成的龐大且不斷擴張的生態系統。Hadoop處于這個生態系統的中心位置,但這個位置并不是***的,很可能在將來的某一天被其他技術所取代。

責任編輯:Ophira 來源: TechTarget中國
相關推薦

2017-02-22 14:30:30

IT存儲工程師公有云

2023-11-23 16:49:56

容器PodmanDocker

2018-09-13 08:19:50

Python Java 編程語言

2010-11-10 10:29:51

職場

2009-09-27 10:15:59

Adobe Flash

2017-01-13 08:09:07

手機

2012-01-13 09:14:27

微軟云計算Azure

2024-04-11 10:00:00

特斯拉

2020-09-22 15:16:49

Python編程語言Julia

2012-08-03 15:02:05

Android 4.0

2024-08-20 14:52:12

2016-04-15 10:01:30

WOT2016MYSQL開發

2024-12-17 12:28:06

2014-12-29 09:59:03

Spark 1.2MapReduce

2017-09-07 09:40:00

2023-11-09 23:51:32

2016-05-03 15:48:41

IEChrome瀏覽器

2016-08-02 11:41:44

云計算

2019-04-10 18:56:40

5G邊緣計算云計算

2017-09-08 09:58:29

金融風控CIO
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 91色视频在线观看 | 日韩亚洲视频 | 99爱在线免费观看 | av看片网站 | 天堂网色| 国产精品日韩 | 精精国产xxxx视频在线野外 | 欧美一二三四成人免费视频 | 午夜免费在线观看 | 一区二区三区欧美在线观看 | 久久精品中文 | 免费簧片视频 | 亚洲自拍偷拍免费视频 | 午夜成人免费视频 | 小草久久久久久久久爱六 | 成人一区在线观看 | 久久天天躁狠狠躁夜夜躁2014 | 成人免费三级电影 | 中文天堂在线一区 | 先锋资源网站 | a久久 | 亚洲精品91 | 一区二区三区四区在线 | 午夜专区 | 成人在线免费观看视频 | 日韩综合在线播放 | 热99精品视频| 亚洲iv一区二区三区 | 国产精品爱久久久久久久 | 国产一区二区三区四区五区3d | 日本网站免费观看 | 国产欧美一区二区三区久久 | 精品国产网 | 国产精品91视频 | 中文字幕在线视频免费观看 | 国产精品一区一区三区 | 国产精品伦一区二区三级视频 | 人人99| 激情91 | 久久久久久亚洲精品 | 艹逼网 |