擁抱廣闊的數(shù)據(jù)自治世界:Open Data Autonomy Mini Summit
6月24日,KubeCon + CloudNativeCon + Open Source Summit China 2019同址活動:Open Data Autonomy Mini Summit在上海世博中心開幕,來自中國聯(lián)通、中國移動、京東、鼎甲、九州云、聯(lián)想、華為、Intel、Yahoo! Japan、LINBIT等公司的眾多業(yè)界大咖齊聚一堂,以O(shè)pen Data Autonomy開放數(shù)據(jù)自治為主題舉辦了為期一天的分享與交流活動,期間演講議題精彩不斷。
SODA,在路上:
SODA中國社區(qū)聯(lián)合創(chuàng)始人,陳敬(華為研發(fā)總監(jiān))和王慶(Intel研發(fā)經(jīng)理,OpenStack基金會個人獨立董事)分別對SODA的過往的歷程和成果進行了回顧,并對未來的構(gòu)想做出了展望。
隨著用戶數(shù)據(jù)中心云化建設(shè)的逐步成熟,社區(qū)創(chuàng)立之初聚焦的數(shù)據(jù)中心異構(gòu)存儲云化問題開始轉(zhuǎn)化為多云數(shù)據(jù)生命周期管理問題,而社區(qū)定位也從OpenSDS(Open SDS Controller)演進到了SODA(Smart Open Data Autonomy)。SODA,從時間維度貫穿了數(shù)據(jù)的最初產(chǎn)生到最終歸檔,從空間維度連接了數(shù)據(jù)中心、私有云和公有云,交流中所談及的理念獲得了會場專家們的強烈共鳴。
重磅力量加入多云數(shù)據(jù)管理:
鐘忻(中國聯(lián)通沃云CTO)介紹了聯(lián)通的對象存儲項目YIG(Yet another index gateway)。YIG是聯(lián)通針對Ceph radosgw在擴展性,故障恢復(fù),性能等方面的不足,自主研發(fā)的海量對象存儲開源項目,當(dāng)前已在百PB視頻存儲場景下得到驗證。該項目由中國聯(lián)通沃云和紫光云工程師聯(lián)合看護,并計劃在Q3將YIG貢獻進SODA社區(qū),與SODA社區(qū)的Gelato(多云數(shù)據(jù)管理項目)合二為一,共同打造多云數(shù)據(jù)管理方案。
引入下一代Cloud Storage Fabric方案:
任橋偉(Intel高級軟件工程師)對NVMe和NVMe-oF兩種協(xié)議進行了介紹,并闡述了云存儲場景下NVMe-oF的優(yōu)秀實踐。隨著NVMe SSD的發(fā)展,NVMe SSD存儲集群已經(jīng)可以解決單服務(wù)器無法充分發(fā)揮SSD性能的問題了,而由此帶來的帶寬和延遲問題,現(xiàn)在可以交給NVMe-oF來解決。基于RDMA技術(shù),NVMe-oF可以使遠程訪問NVMe SSD保持和訪問本地幾乎一致的性能。目前Intel已實現(xiàn)了NVMe-oF在SODA中的支持。
跨云數(shù)據(jù)流動及業(yè)務(wù)連續(xù)性持續(xù)增強:
汪潼(鼎甲科技產(chǎn)品總監(jiān))分享了跨云數(shù)據(jù)流動及業(yè)務(wù)連續(xù)性技術(shù)。企業(yè)正在經(jīng)歷傳統(tǒng)數(shù)據(jù)中心向云轉(zhuǎn)型的過程,鼎甲DBackup CMS正是幫助企業(yè)實現(xiàn)不同云平臺、虛擬化平臺及物理服務(wù)器之間數(shù)據(jù)遷移和流動的利器,其獨特之處在于能同時支持Windows和Linux系統(tǒng)的產(chǎn)品,并支持原有數(shù)據(jù)和新增數(shù)據(jù)在不同存儲之間的高速流動。未來,鼎甲將為SODA在數(shù)據(jù)容災(zāi)備份技術(shù)上注入力量。
分布式文件系統(tǒng)ChubaoFS:
張麗穎(京東產(chǎn)品經(jīng)理)和劉碩然(京東高級工程師)介紹了京東自研的分布式文件系統(tǒng)ChubaoFS,其設(shè)計初衷是為了對京東容器集群提供持久化存儲方案,同時也可作為通用云存儲供業(yè)務(wù)方使用。京東商城業(yè)務(wù)場景復(fù)雜多樣,ChubaoFS已經(jīng)被用于很多核心業(yè)務(wù),在內(nèi)部已服務(wù)了超過100+業(yè)務(wù),如數(shù)據(jù)庫備份,人工智能平臺模型訓(xùn)練,Elasticsearch,Hbase等。ChubaoFS作為云原生的分布式文件系統(tǒng),在容器集群場景下具備了良好的性能,擴展性和穩(wěn)定性,不久前成功支撐了618的超大流量。
基于Ceph的對象存儲系統(tǒng):
余禮楊(中國移動高級工程師)介紹了Ceph和Ceph對象存儲的基本概念,并介紹了中國移動在對象存儲領(lǐng)域構(gòu)建的新特性,包括對象上傳回調(diào)、對象鎖、對象追加上傳、STS臨時認證、桶日志、對象生命周期、防盜鏈等特性在Ceph的基礎(chǔ)上快速構(gòu)建成型。目前SODA的多云管理已實現(xiàn)了對Ceph對象存儲的支持。
LINSTOR,以Linux為中心的軟件定義存儲:
Philipp Reisner(LINBIT CEO)對LINSTOR進行了分享。LINSTOR是一款開源軟件,旨在管理大型Linux服務(wù)器集群的塊存儲設(shè)備。它的主要應(yīng)用場景是為Kubernetes,Docker,OpenStack,OpenNebula和OpenShift環(huán)境提供持久的塊存儲,當(dāng)前與容器的對接已實現(xiàn)了CSI驅(qū)動。
基于AEP的StarlingX邊緣存儲優(yōu)化:
朱博祥(九州云高級工程師)&張鯤鵬(九州云高級工程師)分享了基于AEP的StarlingX邊緣存儲優(yōu)化。StarlingX是一個完整的云基礎(chǔ)架構(gòu)軟件堆棧,適用于工業(yè)物聯(lián)網(wǎng)、電信、視頻傳輸和其他超低延遲用例中要求最苛刻的應(yīng)用程序。使用StarlingX可以快速搭建更接近終端的邊緣云,配合Intel AEP技術(shù)實現(xiàn)邊緣云小規(guī)模大資源,適用多種復(fù)雜場景和需求。
Capri版本新特性推出:
Sanil Kumar D(SODA社區(qū)架構(gòu)師)和王輝(Hotpot項目 PTL)對Capri版本新特性做了細致介紹。迄今為止SODA已發(fā)布了Zeland、Aruba、Bali和Capri四個版本,涉及數(shù)據(jù)發(fā)放,數(shù)據(jù)運維,數(shù)據(jù)保護和數(shù)據(jù)流動等多個領(lǐng)域,當(dāng)前的Capri版本新推出了數(shù)據(jù)編排,數(shù)據(jù)預(yù)測,數(shù)據(jù)生命周期管理,文件存儲等重要特性,大幅提升了SODA的競爭力。
結(jié)語:從2016年到現(xiàn)在,從OpenSDS到SODA,三年一蛻變,理念盡升華。隨著與用戶和伙伴的深入交流與合作,社區(qū)已逐步實現(xiàn)從Open SDS Controller到Smart Open Data Autonomy的快速演進,并基于此獲得了業(yè)界眾多用戶和伙伴的認可和支持。開源無國界,數(shù)據(jù)無邊界,歡迎加入SODA,擁抱廣闊的數(shù)據(jù)自治世界。