4月23日,由51CTO主辦的“MetaCon元宇宙技術大會2022”在線上成功舉辦,大會聚焦元宇宙產業政策、學術研究成果、技術創新和行業落地等多個層面。“人機交互與高效能網絡落地”專場特邀了多名技術大咖,針對如何實現元宇宙世界人機交互,VR/AR/MR虛擬現實技術、全息影像技術、傳感技術等常用技術的最新進展,以及超低延遲傳輸網絡架構在元宇宙場景的應用等話題進行了深入地分析和解讀。
劇本殺的元宇宙落地
光輝城市創始人兼 CEO、重慶大學國家級虛擬現實仿真實驗室副主任宋曉宇從實踐的角度對元宇宙進行了思考和解讀。他表示,得益于多年積累的核心技術,公司探索了與元宇宙緊密結合的新方向——虛擬空間,并在劇本殺行業成功落地。
據宋曉宇介紹,公司自主研發的虛擬空間創作平臺Mars擁有全球首創的PC/VR雙模編輯、幾千種本土植物虛擬資源、地形雕刻技術、天氣光影營造、超分辨率多種內容輸出等技術,可以讓玩家在虛擬世界里享受前所未有的視覺盛宴;針對沉浸體驗,采用超分辨率全景視頻,實時編輯輸出空間盒視覺內容,可以精準表達空間元素的位置關系和視覺效果,并通過融合投影技術將畫面像素級對應至融合帶,實現空間立體化環幕投影,顛覆了玩家感官新體驗;單獨開發的智能播控技術(JOY-TOUCH)可以智能化操控房間溫度、燈光、聲音、味道、溫度、特效等模塊,實現一端多控,增強了玩家沉浸感;虛擬舞臺技術可以將表演者或玩家融合進虛擬場景中進行深度演繹,在減少布景及成本的同時,打破劇本空間桎梏,實現人與場的實時交互,從而創造更流暢爽快的劇情體驗。
宋曉宇表示,劇本殺行業具有用戶年輕、低技術、高速增的特點,生命力非常旺盛,技術升級空間很大,非常值得探索和努力。而對于玩家、店家和創作發行者來說,則存在劇本時間冗長、缺少優秀DM帶本、劇本質量良莠不齊以及盜版猖獗等痛點。針對這些痛點,可以利用核心技術從升級空間、數字拷貝制作發行以及劇本殺元宇宙建設這三個層面來進行解決。
宋曉宇強調,除了劇本殺之外,公司還進行了“劇本人生”(演繹派對酒吧)等新模式的探究,并將持續為劇本殺、傳統酒吧、發行及其它行業和圈層的元宇宙建設提供相應的技術支持,繼續在元宇宙的賽道上探索。
InfiniBand——Meta高性能集群的網絡必由之路
英偉達網絡事業部高級市場開發經理陳龍對Meta集群方案進行了深度的分享。陳龍認為,無論是數據通訊技術的演進、互聯網技術的革新、還是視覺呈現的過渡,都是得益于更強大的計算、更大容量更安全的存儲以及更高效的網絡。
陳龍表示,英偉達網絡結合客戶需求,提出了基于InfiniBand網絡為基礎的集群架構方案,不僅可以提供更高帶寬的網絡服務,同時也降低了網絡傳輸負載對計算資源的消耗,降低了延時,又完美地將HPC與數據中心融合,構建了元宇宙發展的基石。
陳龍強調,InfiniBand之所以能夠成為越來越多領域的主流網絡方案,主要歸因于:SDN部署簡單易維護、可提供業務的最高傳輸帶寬、RDMA技術支持CPU卸載、業界公認最低時延網絡、靈活拓撲支持無限擴展、支持優秀的服務質量配置、靈活的拓撲組網、智能的網絡負載均衡以及支持網絡計算以加速程序運行。
計算和存儲在任何集群中都是非常重要的兩個組成部分。陳龍表示,InfiniBand可以通過RDMA、GPU DIrect RDMA以及SHARP等技術釋放CPU資源、加速網絡傳輸、提升GPU集群以及AI集群性能來實現對計算的加速;另外可以通過存儲器件并行之后的池化,提升數據性能,從而實現對存儲的加速。
戴上AR眼鏡·與未來交互
Rokid產品技術總監趙維奇對 AR和AI技術進行了分享和解讀。他表示,希望通過AR、AI等高科技的能力,讓每個人都受益,并賦能未來。
趙維奇表示,AR的使命是將人、真實世界以及虛擬世界融合。用AR技術創造場景下更自然的虛實結合效果也是Rokid公司一直努力的方向。更好地融合人、真實世界以及虛擬世界,需要感知、理解、協同、展現、內容生產以及數字資產管理等多種能力的支撐,并通過軟件和硬件等多種方式去實現這些能力。
趙維奇介紹,Rokid公司圍繞AR 和AI的能力打造了YodaOS-XR?操作系統。Rokid可以為用戶提供芯片等級的能力,還可以為各個行業提供成熟的解決方案,通過精準的語音識別實現高達99%的喚醒率,此外,還提供包含ID、ME、供應鏈完整的硬件能力以及全球領先的光波導技術,并利用視覺算法幫助用戶了解和感知環境,從而實現AR與AI的深度融合。“另外,從軟件層面我們還提供多模態交互、兼容2D生態的3D操作系統、功能豐富的SDK和便捷的開發工具、以及支持全球開發者的社區和應用發布平臺AR Store,合作伙伴和獨立開發者都能快速便捷的擁有這些能力。”趙維奇補充道。
趙維奇還表示,公司還研發了適用于多種場景的Rokid Air、Rokid Air Pro等產品,希望把更多的元宇宙涉及的場景通過AR 和AI能力進行結合,讓用戶在元宇宙的大環境里獲得多模態、多樣化的體驗,打開元宇宙的大門,與未來交互。
超低延遲傳輸網絡架構在元宇宙場景的應用
網易云信流媒體技術專家陳策分享了超低延遲傳輸網絡架構在元宇宙場景下的應用。他表示,交互技術是元宇宙的核心之一,元宇宙強交互的基礎是數據的低延遲傳輸和同步,元宇宙需要低延遲交互的數據包括控制信令、音視頻以及VR和AR點陣圖。
據陳策介紹,網易云信元宇宙傳輸架構的應用可以從邊緣接入、大網傳輸、低配硬件接入以及數據同步四個角度來實現。邊緣接入通過智能調度和弱網對抗來解決“第一公里”的問題,從而做到貼近用戶,連接世界;大網傳輸(WE-CAN,Communications Acceleration Network)通過對各種資源智能調度來實現提高數據傳輸質量、降低數據傳輸成本,從而解決跨國傳輸最短路徑的問題;低配硬件接入通過云渲染技術來滿足用戶需求;此外,無論何種場景都要保持數據同步,即畫面與控制信令完全同步。
陳策表示,網易在元宇宙領域已經完成了多個項目的落地與實踐。例如:網易伏羲遙感機械可以通過手機控制機械操作;網易伏羲沉浸式活動系統(瑤臺)通過基于云信的WE-CAN全球傳輸網絡和通信能力打造了在線虛擬活動平臺;網易云信虛擬人解決方案以SDK的方式接入,可運用在金融智能虛擬客服、互聯網醫療遠程問診、新聞虛擬主播、社交娛樂虛擬偶像、智能虛擬助手、電商虛擬直播等多種場景。
元宇宙時代的悄然來臨,標志著人類對于人機交互體驗的又一次升級,也是人類自主創造新交互體驗模式的開端。5G高速率、低時延以及高可靠性的信息傳輸特點,有助于實現人機交互模式的升級;而與VR/AR/MR虛擬現實、全息影像等技術的深度融合,則有助于應用場景的豐富與創新,從而推動智能交互走向新的高度。
元宇宙是人機交互技術進步的最好佐證,也是我們對于未來虛擬世界的美好向往。正如51CTO副總裁兼總編輯、MetaCon元宇宙技術大會總策劃崔康指出,元宇宙的時代已經來臨,希望大家能夠和 51CTO社區的2000萬開發者一起擁抱元宇宙技術,希望MetaCon元宇宙技術大會能夠成為中國元宇宙技術發展的一個里程碑。