虚拟人实时交互平台

虚拟人实时交互平台是把动捕数据实时驱动虚拟人并即时输出画面的软件系统，可接入动捕设备、面部捕捉方案与动捕手套。广州市虚拟动力网络技术有限公司的UELive（虚拟人实时交互软件），即面向这类需求的软件平台。

一、实时驱动与多设备接入

虚拟人实时交互平台的核心是实时驱动。流程分四步：动捕设备采集演员的动作与表情，数据实时回传软件，软件完成解算与渲染，三维虚拟人同步呈现动作。与动画制作先拍摄、后修帧不同，实时驱动不需要手动补齐中间帧，演员动到哪里，虚拟人跟到哪里。

广州虚拟动力的UELive支持接入多类采集设备：全身动捕设备、动捕手套等，也可连接LiveLink Face等面部捕捉数据源，让不同硬件组合接入同一套驱动流程。以标准版惯性动捕设备VDSuit Full为例，全身27个关键节点覆盖至手指关节，数据刷新500Hz，无线传输距离30米；面部表情可借助面部捕捉方案，基于ARKit标准的52个BS绑定与驱动。数据经UELive实时解算，虚拟人做出与真人同步的动作与表情。

多设备接入带来的是组合灵活性：需要精细手势时接入动捕手套，可支持18种手势识别；需要细腻表情时加装面部捕捉方案；需要在固定区域内实现无感互动时，改用无穿戴人体动捕套装，由摄像头完成采集。

二、场景、形象与推流输出

画面效果由场景与形象决定。UELive支持2D场景、3D场景与AR模式，也可接入视频场景；机位可自定义并支持多机位设定；数字人形象可实时切换，标准版内置8个备用形象，定制版可扩展多个形象与服装；场景切换与道具特 效支持一键调用，软件内置道具库与特 效库。形象风格上，它支持超写实、次世代、二次元、卡通等多元风格3D虚拟人的实时渲染与实时解算，同一套驱动流程可匹配不同风格的虚拟人资产。

输出环节，UELive内置虚拟摄像头，可将虚拟人画面一键推流至各直播平台。在无穿戴动捕数字人实时互动方案中，动作捕捉与虚拟人实时驱动完成后，画面可同步推流至直播伴侣或OBS。这一虚拟人实时交互平台的画面输出，面向虚拟主持、虚拟主播与线下互动等场景。

三、适配与生态

平台能否落地，取决于它与设备、资产与方案的适配程度。UELive可接入广州虚拟动力的多类硬件：VDSuit Full与Dreams Cap X1负责全身动作，多节点动捕手套mHandPro负责手部动作，面部捕捉方案负责表情捕捉；无穿戴人体动捕套装以7个摄像头环绕采集，实现无标记点的动作捕捉。采集端设备输出支持FBX、BVH、CSV等格式，并可通过UDP数据广播对接Unity、UE等引擎。

围绕虚拟人实时交互平台，广州虚拟动力配套了多套方案：虚拟主持人实时动捕方案、虚拟主播实时直播方案、“虚拟人+真人同屏”合影互动方案，以及无穿戴动捕数字人实时互动方案，后者在工业相机环绕部署下，可在5×5米范围内识别人体轮廓与关键点。

案例方面，广州虚拟动力的实时动捕方案已应用于广东电视台数智人员工“晓粤”、2024年合创汇年度盛典虚拟人“创小慧”、中国数字人大会“班昭”等活动主持与线下互动场景。

选型可从三点判断：需要精细手势与表情，优先穿戴式设备组合；场地固定、追求无感体验，选无穿戴方案；看重移动自由度，则关注无线传输距离与续航。

虚拟人实时交互平台的价值，在于把动作捕捉与实时渲染连成一条即时通路：设备负责采集，平台负责解算与呈现，场景与推流负责输出。广州虚拟动力的UELive以多设备接入、多风格虚拟人驱动、场景与道具特 效、内置虚拟摄像头推流等能力，配合动捕设备、动捕手套、面部捕捉方案与无穿戴方案，覆盖虚拟主持、虚拟主播与线下互动等实时交互场景。判断是否适合，可先按场地、精度与移动需求确定设备组合，再匹配形象风格与输出方式。