成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

大數據時代企業CDO的新玩兒法

原創
云計算
CDO所關注的已經不止于企業數據庫、數據工具和數據分析工具的選型,而是如何利用這些工具對企業內部、外部行業數據進行分析,并根據分析結果為企業日常運營和未來發展提供戰略性指導,成為企企業未來發展方向的參謀官。因此可以捕獲、管理和分析大量結構化和非結構化數據的工具對于企業和CDO來說,就是從眾多競爭者中脫穎而出的利刃。

我們正在歷經一場由大數據應用的普及引發的變革,即使如藍色巨人IBM這樣的傳統巨頭也在通過及時轉型來應對這場技術浪潮的席卷。IBM認為,大數據與工業時代的蒸汽、電力、石油一樣,都是重要的未來資源,企業需要專業人才掌握并利用這種資源,來推動這個時代的進步和發展,就好像當時有人利用石油和電力推動工業時代進步一樣。

這時,企業CDO(首席數據官)責無旁貸地將挑起這個重任。CDO所關注的已經不止于企業數據庫、數據工具和數據分析工具的選型,而是如何利用這些工具對企業內部、外部行業數據進行分析,并根據分析結果為企業日常運營和未來發展提供戰略性指導,成為企企業未來發展方向的參謀官。因此可以捕獲、管理和分析大量結構化和非結構化數據的工具對于企業和CDO來說,就是從眾多競爭者中脫穎而出的利刃。

近日,IBM 在北京富力萬麗酒店舉行“IBM數據管理與洞察研討會”,旨在幫助企業和CDO找到更專業的數據處理和分析服務,以及如何利用IBM數據分析工具PDA與開源技術的結合,提高數據存儲、整合與治理以及最終的分析的能力,來定義大數據時代行業數據的新玩兒法。

PDA(Power Data System for Analytics)是IBM針對大數據倉庫推出的一體機,具于快速、簡單、可擴展和智能等特點。其專門用于在數據倉庫和OLAP系統中處理結構化數據,來解決企業傳統數據倉庫基礎架構復雜、維護困難等弊端。

OLAP系統和OLTP的不同之處在于OLAP著重于分析型的系統,呈現出以涉及數據量大、多表連接等特征。目前數據倉庫和OLAP市場上的主流技術架構為Share Nothing+MPV,具體來說就是將數據按照一定的規則分布在多個磁盤上面,也就是我們常說的數據磁盤,相較OLTP系統將所有數據都存放于一塊盤上的方式,使用Share Nothing架構會使余額表的數據均勻分布在所有磁盤,后續對這張余額表進行的所有操作也都是所有磁盤一起運行,使系統性能得到顯著提升。由于采用Share Nothing架構,使PDA擁有比傳統架構快10—100位的數據處理速度。

硬件加速卡是PAD的技術核心,它由兩塊8核、128G的磁盤組成,整個機器可用數據容量192TB。硬件加構卡主要有以下三個功能:

  • 壓縮和解壓——數據入庫進行壓縮和解壓且不占用計算節點,而是完成在壓縮和解壓消耗的CPU兩個卡上面。
  • 投影——我們可以把它簡單理解為把不需要的列去掉。PDA數據流入內存前,會先經過一道流處理將不需要的字段會被全部砍掉,很大程度上減少內存壓力。
  • 過濾——這是把不需要的行去掉。經過投影和過濾功能處理過以后,數據從磁盤往內存搬的時候,只會涉及到最后有用的數據,使系統性能得到顯著提升。

PDA可以與Datastage等IBM內部產品實現無縫集成。今年PDA新加入了Fluid Query,它可以實現客戶在應用端發起查詢以后,無論這個查詢涉及幾張表,是在PDA平臺里還是在Hadoop平臺里,都可以通過Fluid Query功能自動去找到這張表對應的平臺,然后去做相應的查詢和操作業務。

IBM PDA通過磁盤、計算節點和管理節點來做到HA的三重保障。 另外,它支持很多第三方備份軟件,可以實現全量備分、插量備份、累計備分三種模式,最大程度保證數據安全。

最后要說明的是,PDA相對于市面上其他數據倉庫一體機來講是,需要企業投入的管理力量是最小的,體現幾點。第一,PDA沒有索、主件、外件和分區,也基本不需要調優,因為它的調優在模型設計階段已經體現。第二,不需要存儲管理。PDA的設計中不存在傳統架構中類似于表空間的儲存管理。第三,本身具有容錯機制。一旦發生故障,只需要及時將出現問題的部分及時更換,不會引起某個機器癱瘓,企業也就不用再雇傭專職的數據管理員。

PDA走進中國大陸地區不過三年時間,卻已經擁有電信、證券、銀行等傳統行業在內的40余位客戶,通過提供高性能、海量數據存儲和海量數據處理、降低運維成本、對業務數據進行更加深層次的分析研究等方面的解決方案,為企業帶來價值。

 

責任編輯:Ophira 來源: 51CTO
相關推薦

2013-07-04 11:02:18

2013-05-14 09:44:34

大數據時代企業管理

2021-08-12 14:46:15

大數據數字化轉型技術

2012-08-09 11:10:05

大數據數據中心

2012-02-27 09:39:11

數據中心大數據

2015-01-13 16:26:05

大數據Informatica

2015-11-27 14:38:46

中國軟件資訊網

2015-11-03 15:07:09

CDO大數據首席數據官

2014-06-30 15:12:59

高德

2013-08-28 10:44:46

2015-08-24 09:18:58

大數據

2012-03-01 10:49:08

大數據云計算

2012-06-01 10:22:11

大數據非結構化數據

2012-06-01 13:35:16

大數據IT企業

2013-12-31 10:38:22

大數據

2013-06-13 09:42:11

大數據

2021-10-29 22:45:47

大數據算法技術

2012-04-06 08:47:44

云計算大數據安全

2017-06-09 05:55:56

存儲機器學習人工智能

2015-12-14 17:52:06

ENI經濟和信息化網
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 丝袜 亚洲 欧美 日韩 综合 | 91精品久久久久久久久中文字幕 | 成人精品一区二区 | 国产精品区二区三区日本 | 国产2区 | 午夜精品久久久久久久久久久久久 | 亚洲国产aⅴ精品 | 色呦呦在线 | 国产成人免费视频网站视频社区 | 亚洲精品久久久久久久久久久 | 黄网站在线播放 | 成人h动漫精品一区二区器材 | 激情视频一区 | 最新中文字幕 | 男女爱爱网站 | 黄色电影在线免费观看 | 亚洲欧美一区二区三区国产精品 | 国产真实精品久久二三区 | 日韩精品免费视频 | 中文字字幕一区二区三区四区五区 | 亚洲av一级毛片 | 精品国产免费一区二区三区五区 | 日韩人体视频 | 91精品国产欧美一区二区成人 | 亚洲精品一区二区二区 | 亚洲精品99 | 欧美精品v| 久久婷婷av | 免费一区二区三区 | 欧美日韩成人 | 中文字幕国产一区 | 亚洲精品在线观看视频 | 亚洲精品一区二区 | 日韩午夜影院 | 久久久91| 国产欧美精品区一区二区三区 | 中文字幕日本一区二区 | 日韩在线 | 国产精品 亚洲一区 | 中文字幕视频在线 | 91精品入口蜜桃 |