赋能元宇宙 开启智能交互新未来
4月23日,由51CTO主办的“MetaCon元宇宙技术大会2022”在线上成功举办,大会聚焦元宇宙产业政策、学术研究成果、技术创新和行业落地等多个层面。“人机交互与高效能网络落地”专场特邀了多名技术大咖,针对如何实现元宇宙世界人机交互,VR/AR/MR虚拟现实技术、全息影像技术、传感技术等常用技术的最新进展,以及超低延迟传输网络架构在元宇宙场景的应用等话题进行了深入地分析和解读。
剧本杀的元宇宙落地
光辉城市创始人兼 CEO、重庆大学国家级虚拟现实仿真实验室副主任宋晓宇从实践的角度对元宇宙进行了思考和解读。他表示,得益于多年积累的核心技术,公司探索了与元宇宙紧密结合的新方向——虚拟空间,并在剧本杀行业成功落地。
编辑搜图
据宋晓宇介绍,公司自主研发的虚拟空间创作平台Mars拥有全球首创的PC/VR双模编辑、几千种本土植物虚拟资源、地形雕刻技术、天气光影营造、超分辨率多种内容输出等技术,可以让玩家在虚拟世界里享受前所未有的视觉盛宴;针对沉浸体验,采用超分辨率全景视频,实时编辑输出空间盒视觉内容,可以精准表达空间元素的位置关系和视觉效果,并通过融合投影技术将画面像素级对应至融合带,实现空间立体化环幕投影,颠覆了玩家感官新体验;单独开发的智能播控技术(JOY-TOUCH)可以智能化操控房间温度、灯光、声音、味道、温度、特效等模块,实现一端多控,增强了玩家沉浸感;虚拟舞台技术可以将表演者或玩家融合进虚拟场景中进行深度演绎,在减少布景及成本的同时,打破剧本空间桎梏,实现人与场的实时交互,从而创造更流畅爽快的剧情体验。
宋晓宇表示,剧本杀行业具有用户年轻、低技术、高速增的特点,生命力非常旺盛,技术升级空间很大,非常值得探索和努力。而对于玩家、店家和创作发行者来说,则存在剧本时间冗长、缺少优秀DM带本、剧本质量良莠不齐以及盗版猖獗等痛点。针对这些痛点,可以利用核心技术从升级空间、数字拷贝制作发行以及剧本杀元宇宙建设这三个层面来进行解决。
宋晓宇强调,除了剧本杀之外,公司还进行了“剧本人生”(演绎派对酒吧)等新模式的探究,并将持续为剧本杀、传统酒吧、发行及其它行业和圈层的元宇宙建设提供相应的技术支持,继续在元宇宙的赛道上探索。
InfiniBand——Meta高性能集群的网络必由之路
英伟达网络事业部高级市场开发经理陈龙对Meta集群方案进行了深度的分享。陈龙认为,无论是数据通讯技术的演进、互联网技术的革新、还是视觉呈现的过渡,都是得益于更强大的计算、更大容量更安全的存储以及更高效的网络。
陈龙表示,英伟达网络结合客户需求,提出了基于InfiniBand网络为基础的集群架构方案,不仅可以提供更高带宽的网络服务,同时也降低了网络传输负载对计算资源的消耗,降低了延时,又完美地将HPC与数据中心融合,构建了元宇宙发展的基石。
编辑搜图
陈龙强调,InfiniBand之所以能够成为越来越多领域的主流网络方案,主要归因于:SDN部署简单易维护、可提供业务的最高传输带宽、RDMA技术支持CPU卸载、业界公认最低时延网络、灵活拓扑支持无限扩展、支持优秀的服务质量配置、灵活的拓扑组网、智能的网络负载均衡以及支持网络计算以加速程序运行。
计算和存储在任何集群中都是非常重要的两个组成部分。陈龙表示,InfiniBand可以通过RDMA、GPU DIrect RDMA以及SHARP等技术释放CPU资源、加速网络传输、提升GPU集群以及AI集群性能来实现对计算的加速;另外可以通过存储器件并行之后的池化,提升数据性能,从而实现对存储的加速。
戴上AR眼镜·与未来交互
Rokid产品技术总监赵维奇对 AR和AI技术进行了分享和解读。他表示,希望通过AR、AI等高科技的能力,让每个人都受益,并赋能未来。
赵维奇表示,AR的使命是将人、真实世界以及虚拟世界融合。用AR技术创造场景下更自然的虚实结合效果也是Rokid公司一直努力的方向。更好地融合人、真实世界以及虚拟世界,需要感知、理解、协同、展现、内容生产以及数字资产管理等多种能力的支撑,并通过软件和硬件等多种方式去实现这些能力。
编辑搜图
赵维奇介绍,Rokid公司围绕AR 和AI的能力打造了YodaOS-XR®操作系统。Rokid可以为用户提供芯片等级的能力,还可以为各个行业提供成熟的解决方案,通过精准的语音识别实现高达99%的唤醒率,此外,还提供包含ID、ME、供应链完整的硬件能力以及全球领先的光波导技术,并利用视觉算法帮助用户了解和感知环境,从而实现AR与AI的深度融合。“另外,从软件层面我们还提供多模态交互、兼容2D生态的3D操作系统、功能丰富的SDK和便捷的开发工具、以及支持全球开发者的社区和应用发布平台AR Store,合作伙伴和独立开发者都能快速便捷的拥有这些能力。”赵维奇补充道。
赵维奇还表示,公司还研发了适用于多种场景的Rokid Air、Rokid Air Pro等产品,希望把更多的元宇宙涉及的场景通过AR 和AI能力进行结合,让用户在元宇宙的大环境里获得多模态、多样化的体验,打开元宇宙的大门,与未来交互。
超低延迟传输网络架构在元宇宙场景的应用
网易云信流媒体技术专家陈策分享了超低延迟传输网络架构在元宇宙场景下的应用。他表示,交互技术是元宇宙的核心之一,元宇宙强交互的基础是数据的低延迟传输和同步,元宇宙需要低延迟交互的数据包括控制信令、音视频以及VR和AR点阵图。
编辑搜图
据陈策介绍,网易云信元宇宙传输架构的应用可以从边缘接入、大网传输、低配硬件接入以及数据同步四个角度来实现。边缘接入通过智能调度和弱网对抗来解决“第一公里”的问题,从而做到贴近用户,连接世界;大网传输(WE-CAN,Communications Acceleration Network)通过对各种资源智能调度来实现提高数据传输质量、降低数据传输成本,从而解决跨国传输最短路径的问题;低配硬件接入通过云渲染技术来满足用户需求;此外,无论何种场景都要保持数据同步,即画面与控制信令完全同步。
陈策表示,网易在元宇宙领域已经完成了多个项目的落地与实践。例如:网易伏羲遥感机械可以通过手机控制机械操作;网易伏羲沉浸式活动系统(瑶台)通过基于云信的WE-CAN全球传输网络和通信能力打造了在线虚拟活动平台;网易云信虚拟人解决方案以SDK的方式接入,可运用在金融智能虚拟客服、互联网医疗远程问诊、新闻虚拟主播、社交娱乐虚拟偶像、智能虚拟助手、电商虚拟直播等多种场景。
元宇宙时代的悄然来临,标志着人类对于人机交互体验的又一次升级,也是人类自主创造新交互体验模式的开端。5G高速率、低时延以及高可靠性的信息传输特点,有助于实现人机交互模式的升级;而与VR/AR/MR虚拟现实、全息影像等技术的深度融合,则有助于应用场景的丰富与创新,从而推动智能交互走向新的高度。
元宇宙是人机交互技术进步的最好佐证,也是我们对于未来虚拟世界的美好向往。正如51CTO副总裁兼总编辑、MetaCon元宇宙技术大会总策划崔康指出,元宇宙的时代已经来临,希望大家能够和 51CTO社区的2000万开发者一起拥抱元宇宙技术,希望MetaCon元宇宙技术大会能够成为中国元宇宙技术发展的一个里程碑。
我有话说: