动作捕捉融合 [ VR ](Mocap Fusion [ VR ])

动作捕捉融合是一个身临其境的roomscale mocap沙盒,适用于希望创建和导出运动捕捉动画的艺术家和动画师,或创建实时内容,使用常规VR硬件。只需一个VR HMD和两个控制器,用户就可以在自己的虚拟化身上创建mocap。高级用户可以创建更详细的动作捕捉,包括全身跟踪,并可以与其他传感器结合使用(如苹果IPhone真实深度传感器和Oculus Quest 2光学手指跟踪)将化身连接到同时输入。这种多个传感器融合可以在单次拍摄中组合多层运动捕捉;包括:全身追踪、人脸捕捉、lipsync、视线追踪、光学手指追踪。

突出

使用自定义头像、场景和道具记录动作捕捉。
添加自定义着色器,纹理,表情,动态骨骼物理和更多。
Vive pro eye,Vive lip tracking和Iphone ARkit facecap支持。
HTC Vive,Valve Index,Oculus Rift,Oculus Quest2,一些WMR耳机。
可以不用VR,只使用追踪器,或者只使用IPhone头部追踪。
将多个虚拟角色添加到场景中,构建故事板,对其他预先录制的虚拟角色做出反应。
相机动作捕捉和缩放,玩家在VR中充当电影摄影师。
航空摄影用垂直起落和固定翼飞行模拟飞行器平台。

支持的输出格式
出口到SFM (.dmx).
出口到搅拌机 (.混合).
出口到一致 (.anim).

直播链接(直播制作)和直播录制插件
实时链接插件可用于虚幻引擎 (现场头像同步,现场录制).
实时链接插件可用于搅拌机 (现场头像同步,现场录制).
实时链接插件可用于一致 (现场头像同步).


包括自定义头像,并在整个制作工作流程中使用头像。这消除了重定目标的需要,并确保mocap数据始终符合1:1,而不会导致最终结果中的任何偏移。

的独特之处之一Mocap融合它能够导出运动捕捉数据,并在Blender中重建场景,使其在几分钟内即可用于最终渲染。

兼容耳机(虚拟现实头盔显示器)
阀门指数
HTC Vive(还有Vive Pro Eye).
Oculus Quest(1和2).

可选跟踪硬件
SteamVR Vive跟踪器。
IPhone Truedepth传感器(面罩和眼睛追踪).
Oculus Quest 2(全光学手指跟踪).

能力
导出mocap并立即在Blender中创建场景。
HTC Vive追踪器(多达11个可选点)全身追踪。
能够在VR中录制、回放、暂停、slomo、擦洗mocap。
可定制的IK配置文件和化身参数。
蒸汽指关节支持个人手指关节。
Quest 2光学手指跟踪应用程序,用于个人手指关节和手指分离。
Vive Pro眨眼和视线跟踪支持。
Sidekick IOS人脸捕捉app (Truedepth无标记AR面部追踪)。
用户可定制的世界,《阿凡达》和道具可以使用APS_SDK为mocap构建。
与现有Unity3D头像和环境兼容。
支持mocap头像上的自定义着色器。
动态骨骼支持添加头发,衣服和身体物理模拟的化身。
增加胸部动画的呼吸模拟。
添加/录制/导出虚拟现实摄像机的mocap(如虚拟现实摄像师效果)。
导出mocap的优化(。bvh)数据到Daz 3D。
放置用于直播的“流式”摄像机,将头像流式传输到OBS或作为桌面覆盖。
麦克风录音,带唇形同步视位和可记录的颚骨旋转。
故事板模式,将mocap体验保存为页面,以便以后回放或编辑。
动画视频播放器,显示故事和脚本,舞蹈动作。
双手武器IK解算器自然处理卡宾枪。
用于制作直升机飞行模拟动画的可记录垂直起落平台(如新闻直升机)。
VR摄像机和VR自拍摄像头可能会与追踪器刚性链接。
VR道具和枪械可能会和追踪器刚性挂钩。
用于可视化场景中多个化身的未来位置的幻影曲线。

游戏部分
体验取决于用户的PC和使用的跟踪硬件。推荐的SteamVR耳机是Valve Index或者HTC Vive。HMD的探索也可能产生合理的结果。也可以在没有HMD的情况下使用软件(例如直播时)。全身跟踪仅在使用脚和臀部跟踪器(以及可选的肘、膝、胸)时可用。当使用身体跟踪器时,用户可以获得更真实的跟踪结果。身体追踪器是可选的,并支持站立式mocap。通过启用面部捕捉或使用Vive Pro Eye进行凝视和眨眼跟踪,可以在兼容的化身上实现进一步的真实感。

历史
最初,这是一种直观的方式,用户可以在沉浸式VR环境中创建虚拟培训视频和演示,以增加真实感,然后导出他们的动画进行渲染。该项目对社区进行了测试,并收到了反馈和许多功能请求,这有助于增加软件对不同创作者的实用性。



备注:开通会员后下载资源
SVIP免费

已有人支付

提供最优质的资源集合