賦能元界開啟智能交互新未來
2022.04.25
賦能元界開啟智能交互新未來
原來的
《人機交互與高效網絡落地》特邀重慶大學國家虛擬現實仿真實驗室副主任宋曉宇、Rokid產品技術總監趙薇薇、英偉達網絡事業部高級市場開發經理陳龍,引導我們進入人機交互。走在高性能網絡技術的前沿!
4月23日,由51CTO主辦的“MetaCon元界技術大會2022”線上成功舉辦。會議重點關注元界產業政策、學術研究成果、技術創新和產業實施。 “人機交互與高效網絡實現”專場邀請多位技術專家共同探討如何在元界世界實現人機交互、VR/AR/MR虛擬現實技術、全息成像技術、傳感技術和其他常用技術。對最新進展,以及超低時延傳輸網絡架構在元界場景中的應用等進行了深入分析和解讀。
被腳本殺死的元宇宙登陸
光輝之城創始人兼CEO、重慶大學國家虛擬現實仿真實驗室副主任宋曉宇從實踐的角度思考和解讀了元界。他表示,得益於多年來積累的核心技術,公司探索出了與元界緊密結合的新方向——虛擬空間,並成功落地劇本殺行業。
據宋曉宇介紹,公司自主研發的虛擬空間創作平台Mars擁有全球首創PC/VR雙模剪輯、千種原生植物虛擬資源、地形雕刻技術、天氣光影創作、超分辨率多內容輸出和其他技術。讓玩家在虛擬世界中享受前所未有的視覺盛宴;為沈浸式體驗,採用超分辨率全景視頻對空間盒子的視覺內容進行實時編輯和輸出,能夠準確表達空間元素的位置關係和視覺效果,融合投影技術,實現畫面的像素級對應融合區,實現空間立體環屏投影,顛覆玩家全新感官體驗;自主研發的智能播控技術(JOY-TOUCH),可智能控制室溫、燈光、聲音、味道、溫度、特效等模塊,實現一站式多控,增強玩家沉浸感;虛擬舞台技術可以將表演者或玩家融入虛擬場景進行深度演繹,同時減少佈景和成本,打破劇本空間的束縛,實現人與場景的實時互動,從而創造更流暢、更爽快的故事體驗。
宋曉宇表示,劇本殺行業具有用戶年輕、技術含量低、增長快的特點。生命力很強,技術提升空間很大,非常值得探索和努力。對於玩家、店主、創作者和發行商來說,存在著劇本時間長、缺乏優秀的DM磁帶、劇本質量參差不齊、盜版猖獗等痛點。針對這些痛點,可以通過核心技術來解決這三個方面:升級空間、數字副本製作發行、劇本殺元界建設。
宋曉宇強調,除了劇本殺,公司還探索了“劇本生活”(解釋黨酒吧)等新模式,將繼續為建設提供劇本殺、傳統酒吧、發行等行業和圈子。的元節。有了相應的技術支持,在元界的軌道上繼續探索。
InfiniBand - Meta 高性能集群的唯一聯網方式
英偉達網絡事業部高級市場開發經理陳龍對Meta集群解決方案進行了深入分享。陳龍認為,數據通信技術的演進、互聯網技術的創新、視覺呈現的轉變,都得益於更強大的計算、更大容量和更安全的存儲以及更高效的網絡。
陳龍表示,結合客戶需求,NVIDIA提出了基於InfiniBand網絡的集群架構解決方案,不僅可以提供更高帶寬的網絡服務,還可以減少網絡傳輸負載對計算資源的消耗,減少延遲。將HPC與數據中心完美融合,構建了元界發展的基石。
陳龍強調,InfiniBand之所以能夠成為越來越多領域的主流網絡解決方案,主要是因為:SDN部署簡單易維護,可為業務提供最高的傳輸帶寬,RDMA技術支持CPU分流,以及業界公認的最低延遲網絡,靈活的拓撲支持無限擴展,支持卓越的服務質量配置,靈活的拓撲組網,智能網絡負載均衡,支持網絡計算加速程序運行。
計算和存儲是任何集群中兩個非常重要的組件。陳龍表示,InfiniBand可以通過RDMA、GPU DIrect RDMA、SHARP等技術釋放CPU資源,加速網絡傳輸,提升GPU集群和AI集群的性能,從而加速計算。數據性能,從而實現存儲加速。
戴上AR眼鏡,與未來互動
Rokid產品技術總監趙薇薇分享並解讀了AR和AI技術。他表示,希望通過AR、AI等高科技能力造福大家,賦能未來。
趙薇薇表示,AR的使命是融合人、現實世界和虛擬世界。利用AR技術在場景中創造出更加自然的虛實結合效果,也是Rokid一直在努力的方向。人、現實世界、虛擬世界更好的融合,需要感知、理解、協作、呈現、內容製作、數字資產管理等多種能力的支撐,並通過軟硬件實現這些能力。
據趙偉奇介紹,Rokid 圍繞 AR 和 AI 的能力打造了 YodaOS-XR® 操作系統。 Rokid可以為用戶提供芯片級的能力,也可以為各行業提供成熟的解決方案,通過準確的語音識別實現高達99%的喚醒率。此外,它還提供包括ID、ME、供應鏈在內的完整硬件能力以及全球領先的光波導技術,並利用視覺算法幫助用戶理解和感知環境,從而實現AR與AI的深度融合. “此外,從軟件層面,我們還提供多模態交互、兼容2D生態的3D操作系統、功能豐富的SDK和便捷的開發工具,以及支持全球開發者、合作夥伴的社區和應用發布平台AR Store並且獨立開發者可以快速輕鬆地擁有這些能力。”趙薇薇補充道。
趙薇薇還表示,公司還開發了適用於各種場景的Rokid Air、Rokid Air Pro等產品,希望通過AR和AI能力將更多涉及元界的場景結合起來,讓用戶置身於元界環境中。獲得多模式、多樣化的體驗,打開通往元宇宙的大門並與未來互動。
超低時延傳輸網絡架構在元界場景中的應用
網易云信流媒體技術專家陳策分享了超低時延傳輸網絡架構在元界場景下的應用。他表示,交互技術是元界的核心之一,而元界的強交互是基於數據的低延遲傳輸和同步。元界需要低延遲交互的數據包括控制信令、音視頻、VR和AR位圖。
據陳策介紹,網易云芯源宇宙傳輸架構的應用可以從邊緣接入、大網傳輸、低配硬件接入、數據同步四個方面來實現。邊緣接入通過智能調度和弱網對抗,解決“第一公里”難題,貼近用戶,連接世界;大型網絡傳輸(WE-CAN,Communications Acceleration Network)通過對各種資源的智能調度,提高數據傳輸質量,降低數據傳輸成本,從而解決跨境傳輸的最短路徑問題;低端硬件接入,通過雲渲染技術滿足用戶需求;使其完全同步。
陳策表示,網易已經在元界領域完成了多個項目的實施和實踐。例如:網易伏羲遙感機械可以通過手機控制機械操作;網易伏羲沉浸式活動系統(瑤台)基於雲信,通過WE-CAN全球傳輸網絡和通信能力,打造線上虛擬活動平台;網易云信虛擬人解決方案 解決方案以SDK形式接入,可應用於金融智能虛擬客服、互聯網醫療遠程問診、新聞虛擬主播、社交娛樂虛擬偶像、智能虛擬助手、e - 商務虛擬直播。
元界時代的悄然到來,標誌著人機交互體驗的又一次升級,也是人類開創全新交互體驗模式的開始。 5G高速、低時延、高可靠的信息傳輸特性,將助力人機交互模式升級;而與VR/AR/MR虛擬現實、全息成像等技術的深度融合,將助力應用場景的豐富與創新,從而將智能交互推向新高度。
元宇宙是人機交互技術進步的最好證明,也是我們對未來虛擬世界的美好嚮往。正如51CTO副總裁兼主編、MetaCon元界技術大會總策劃崔康所指出的,元界時代已經到來,希望大家和2000萬開發者一起擁抱元界技術。 51CTO社區,並希望MetaCon元界技術大會能夠成為中國元界技術發展的里程碑。