3D可视化：用元宇宙的方式打开知识图谱( 四 ) _宇宙知识

六、VR/AR技术在图谱可视化上的应用
W3C 在今年10?26?发布了 WebXR Device API 草案, WebXR Device API 用于替换之前的WebVR，该草案支持在 Web 上访问虚拟现实 (VR) 和增强现实 (AR) 设备，包括传感器和头戴式显示器。标准的制订有利于设备的兼容性，让开发者更容易开发出VR/AR 应用。
A-Frame， ?款基于HTML 语言的开发框架，可兼容多种3D可视化引擎，设备方面兼容 Vive、Rift、Quest、Daydream、GearVR、Cardboard等主流VR平台。基于 A-Frame技术，渊亭科技在 DataExa-Sati 上开发、拓展了WebXR的技术应用。
WebXR应用于图谱可视化的优势在于交互性，借助于A-Frame的交互能力与硬件设备的支持，我们可以有无限遐想，基于基础动作抓、抛、擦、转、戳、伸、压等等动作延伸出我们现实世界里能想到的动作进行控制交互，不仅如此通过混合现实中的跟踪和自定义控制器我们甚至可以创造超现实主义手握乾坤、睥睨世界，为此DataExa-Sati 设计了?组叫“魔方手势”，用于缩放、旋转、聚焦、销毁、拓展等图谱可视化操作。
WebXR非常有趣的是基于凝视（Gaze-Based）的光标组件交互，与网页的交互不?样，我们在虚拟环境中，可以使?视觉焦点，当视觉焦点移动到目标上的时候就像鼠标移动到目标上?样，凝视控制对于没有?柄的头显会特别有用，通过凝视交互， DataExa-Sati 把这一交互形式应用在了图谱节点的信息标题查看上。
WebXR中控制器对于虚拟现实中的沉浸体验特别重要，使用使用六自由度（6DoF）控制器，人们就可以感觉接触到周围的景物，用手与物体进行交互。 A-Frame提供了系列控制器组件，通过各自的网络浏览器来支持游戏手柄（Gamepad）Web API 。有不同的组件来支持不同厂商的控制器，使用手柄我们可以实现自己在虚拟世界的位置移动，通过手柄的抛射线，我们可以很容易的指向到我们需要移动的位置，通过这一交互方式DataExa-Sati 实现了沉浸式的虚拟世界遨游，行走于数字空间。
WebXR 中我们通过注册监听器来监听按钮事件和轴事件，通过监听事件我们可以动态地改变图谱的?些属性如高亮图谱节点、边，放?或者移动节点等，另?项非常有?的交互手段是使?超级手组件，超级手组件提供了全功能的自然手控制器交互，基本手势包括：
● 悬停（Hover）: 在实体的碰撞空间中握住控制器
● 抓住（Grab）: 按下?个按钮在实体上悬停或移动它
● 拉伸（StrETCh）: 用双手抓住?个实体并调整大小
● 拖放（Drag-drop）: 将实体拖到另?实体上
2020年10?22日， W3C沉浸式Web工作组（Immersive Web Working Group）发布 WebXR手势输入模块第一版规范（WebXR Hand Input Module – Level 1）的首个公开工作草案（First Public Working Draft）。该模块扩展了 WebXR Device API 规范，具有追踪关节手势的功能，可用于在 VR 场景中识别手部关节姿势或渲染手势模型。

借助于手柄控制，我们可以很真实地模拟现实世界，将图谱投射到3维空间中，我们可以用虚拟的手拾取、触摸图谱，通过面板触碰图谱节点、操作图谱节点等，这一交互形式使我们很大程度上还原了现实世界的交互模拟，交互显得特别自然。

七、知识图谱可视化技术的应用实践
1、DataExa-Sati 认知智能平台
近年来，渊亭科技在知识图谱、可视化等人工智能前沿领域上投入了诸多研究。公司自研的DataExa-Sati 认知智能平台提供一站式多模态行业知识图谱构建体系，包括定义领域认知框架的知识建模、多源异构的知识抽取、提升本体层和实例层质量的知识融合、支持万亿级别的高性能图存储计算引擎以及知识推理能力等，让机器使用专家知识以及推理能力解决实际问题为主要目标，最终针对行业应用进行赋能。

3D可视化：用元宇宙的方式打开知识图谱( 四 )

猜你喜欢