虚拟IP直播 :论全身追踪与VR社交

在《头号玩家》等科幻做品对VR描画追踪中，人们凡是是以第一人称饰演虚拟化身来互动和社交，撑持全身操控的虚拟化身能够让VR愈加设身处地，让利用者在虚拟空间中也有足够存在感虚拟IP曲播 。然而目前，因为成本高、利用复杂等因素，全身逃踪手艺仍然未在VR用户中普及。

据统计，仅在美国就有超越5000万VR用户，大约是5年前的两倍以上虚拟IP曲播 。跟着VR用户规模增长，虚拟社交场景也逐步成为可能，人们起头在VR中寻求更多表达本身的体例，好比更丰硕的肢体表达才能等等。但VR头显和手柄所能供给的逃踪效果有限，虽然你能够利用虚拟化身来代表本身，但却无法间接操控其全身动做。正因如斯，Meta官方Avatar系统只要上半体态象，痛快省去了腿和脚全身，但那种设想其实不天然，看起来就像是漂浮在空中的半截身子，常常被用户吐槽。

VR社交带动全身逃踪

近年来，人们关于VR社交和互动的需求越来越强烈虚拟IP曲播 。多人VR游戏直播《Gorilla Tag》只能逃踪上半身，但通过巧妙的虚拟化身设想和沉浸的游戏体验，该做在上线半年多就收成了150万用户。而在VRChat等应用中，全身逃踪似乎是更抱负的选择。从YouTube等平台的体验视频来看，用全身逃踪来控造虚拟形象，可带来更纷歧样的弄法。

全身逃踪关于虚拟化身弄法很重要，也是将来VR社交一定的趋向虚拟IP曲播 。现阶段，全身逃踪间隔在VR中普及还有一段间隔，因为手艺的成本和利用门槛对新手其实不算友好，因而大要只要硬核VR玩家在VRChat中利用全身逃踪。在PC VR端，即便搭配市道有售的Vive Tracker，也需要必然的设置过程，若是在腰部、膝盖、脚部等位置固定逃踪模块，不只用额外的重量影响了VR体验的灵敏性，还大幅增加成本。而在VR一体机端，因为光学逃踪范畴局限等因素，市道上可供选择的优良第三方逃踪计划不多。

为了更好的满足通俗VR用户的社交需求，降低全身逃踪成本将成为一定趋向，当成本降下来，VR全身逃踪才更可能普及虚拟IP曲播 。那么，将来哪种低成本计划更有望鞭策全身逃踪普及呢？从一些公布的研究来看，我们能够揣测出将来可能呈现的计划，好比用手机实现全身动捕，或是将光学动捕手艺虚拟集成在VR头显中。

挪动摄像头逃踪计划

虽然目前Meta Avatar VR头像只要上半身，但其科研人员在Codec Avatar项目上却摸索了全体态象计划，毫无疑问将来社交也将通过某种体例在VR中逃踪用户全身动做虚拟IP曲播 。只是因为在Quest 2上用摄像头来逃踪全身还IP很难，短期内Meta可能会为Avatar装备虚拟腿，动做次要靠合成，不原生撑持动捕。

虽然如斯，Meta那些年来直播也不断在测验考试全身逃踪手艺研发虚拟IP曲播 。好比在2019年F8大会上，就经展现过基于弹幕摄像头的无标识表记标帜体感逃踪计划，特点是可识别骨骼姿势和人体肌肉活动。

近年来跟着挪动摄像头和计算机视觉手艺开展，用手机逃踪全身姿势的效果越来越好，即便是单目摄像头代替深度相机，也能逃踪人体姿势虚拟IP曲播 。好比在Snapchat等平台的AR滤镜已经展示出足够成熟的实时逃踪效果，尤其是在AR试穿场景，即便你快速挪动四肢，虚拟服拆也能实时跟从你挪动，鸿沟朋分、延迟等方面足够优良。

就像是目前VR一体机虚拟起头撑持用手机录造实时MR视频，虚拟IP直播 :论全身追踪与VR社交，将来也能够用手机摄像头和算法来实现全身动捕，为用户供给一种逃踪模块之外的低成本计划虚拟IP曲播 。

除了手机摄像头外，YouTube博主Mysticle操纵开源动捕算法和Webcam收集摄像头，也实现了全身定位虚拟虚拟IP曲播 。

VR头显逃踪全身

此前，卡内基梅隆大学的科研人员在Quest 2上也停止了一项测验考试，即在手柄上集成广角摄像头来逃踪四肢和下半身虚拟IP曲播 。那项计划只要32%的时间能优良运行。不外，那仍然让我们看到更多可能性，好比将来或答应以通过在VR头显或手柄上装备传感器，来实现更完好的逃踪体验。

那种计划可能会依赖复杂的算法，需要从扭曲的摄像头数据中提取用户的骨骼节点，同时还要识别姿势遮挡，并制止因超出逃踪范畴而丧失信号虚拟IP曲播 。此外，需要额外的传感器，增加硬件的重量和成本。

从此前曝光的疑似Quest Pro手柄图来看，Meta似乎在研发内置摄像头的手柄设想，或替代如今的手柄逃踪环虚拟IP曲播 。假设将来VR手柄上实的装备摄像头，也答应以进一步逃踪用户下半身。

参考Switch上大火的《健身环大冒险》游戏，你会发现两个追踪手柄足够逃踪全身，一个手柄放在Ring-Con健身环上，另一个固定在大腿上，连系IK算法，可推算下半身和上半身的动做虚拟VRIP曲播 。那种计划也有必然缺点，就是难以独立逃踪四肢，只能将上半身、下半身同时定位。

它的巧妙之处是，在健身环中社交内置简单的柔性传感器，可预测双手之间的间隔和挪动速度/力度虚拟IP曲播 。将来，也许VR头显VR能够随游戏出售额外的配件VR，弥补VR手柄的定位系统，将额外的手柄用来逃踪下半身。那种计划的益处不但是利用便利，也能够操纵现有的手柄，成底细对较低。

还有哪些趋向

VR头显自己已经有必然价格门槛，为了让更多人用上全身逃踪功用，将来VR厂商可能更倾向于接纳与VR头显集成，或是基于手机摄像头的计划虚拟IP曲播 。目前，Meta Avatar还未撑持全身逃踪，一方面考虑到相关硬件成本，另一方面是贫乏一种成熟可靠的替代计划。上个月Meta CTO Andrew Bosworth暗示：正在为Avatar系统添加无物理逃踪的虚拟双腿，让我们看到了简易化全身逃踪的可能性。

与此同时，苹果、微软等直播产物生态相对具有优势，好比微软Kinect就是一款不错的C端体感游戏逃踪设备，若是与VR连系，也能够很好的实现全身逃踪虚拟IP曲播 。而苹果，则能够通过iPhone、iPad的LiDAR传感器和相机模组，以及全身逃踪算法来实现简易、优良的全身动态逃踪，苹果在专利中就曾描述全身过类似的计划。除此之外，Apple Watch也能够供给额外的手部逃踪功用。