搞完动画搞VR,这家公司不仅技术牛逼,还很会为客户省钱

魔多君先跟大家分享一个视频,这个视频展示了目前实时操控人类角色能达到接近游戏最终视觉效果的最高水平”。


《地狱之刃》(Hellblade) 实验项目(魔多字幕菌)


简单来说,就是真人演员现场表演,通过动作捕捉、脸部识别和实时渲染技术,游戏世界的虚拟角色可以和演员的动作、表情同步。逼真程度堪称“照片级的真实感”。


整个实验最大意义是:没有任何绿幕!


你可能会觉得很烧钱,但其实这个游戏的开发团队 Ninja Theory 只有 16 个人,也没花多少钱。LED 灯是在亚马逊买的,支架在宜家买的,相机用的是 GoPro,动捕系统用的是最 low 的。


他们只为证明一件事——其实技术已经可以如此牛逼了!


视频结尾出现的 6 家公司就是这个项目的技术提供者,而魔多君今天要讲的是倒数第二个公司 IKinema。




IKinema 是一家做全身 IK 解析的公司(IK 是 inverse kinematics 的缩写,用骨架结构来解析真实运动的系统),它主要是用来填补定位点之间的空白,让虚拟人物的运动更加形象真实。


举个栗子,特效演员身上的标记点可以记录大部分动作,但无法实现骨架一对一的匹配。下蹲时,我们的膝盖、屁股等位置都是有差异的,这些细节越多,人物越不灵活。而 IKinema 的技术可以解决一些难以对付的姿势,让你的锁骨也能很自然的伸展。


看看爵迹就知道什么叫做“僵尸综合征效应”了,保证不吓死你!




IKinema 2006 年成立于英国,2009 年开始进入动画、游戏和电影市场。它使用自主研发的算法动态和计算动画序列,不仅提高动画制作效率,而且降低成本,让动画更真实了。


看看人家的合作伙伴就知道了,二十世界福克斯电影公司 、迪士尼、梦工厂、卡普空、Zenimax、Autodesk、Valve、微软、索尼、英特尔、英伟达等,都是顶尖的。




IKinema 一直服务于虚拟体验,VR 的流行自然也成了公司发展的重心。


就像英伟达、AMD、英特尔等大厂相继推出 VR Ready 电脑一样,IKinema 的技术也是各种为 VR Ready。


1、为 VR 游戏打造真实的动画角色


IKinema RunTime 中间件是一款强大的通用全身 IK 解算器,可以大大简化 VR 工作流并捕捉人物的实时动作。


开发者播放游戏,看看动画角色的动作顺不顺畅,肢体大小形状合不合适。



不满意的话实时修改



加一个头盔



然后放到 VR 里,你的全身动作适用于任何动画角色。



灵活的小手1



灵活的小手2



IKinema RunTime 允许开发者使用 IKinema 的相同代码去支持移动端和 3A 项目。这意味着可以节省人力物体,把通用的动画标准应用在多平台项目当中。


2、为大空间 VR 提供化身


IKinema LiveAction 软件集成在 UE4 里面,支持 OptiTrack、Vicon 和 Xsens 动作捕捉系统。


摄像头实时捕捉演员打篮球的动作传送到 LiveAction。



LiveAction 立即把数据传送到 UE4,用 ACP(动画清理流程) 过滤器自动清理数据,然后将数据重新定位到虚拟角色,零延迟。



最终输出的效果:从演员反馈到角色的动作是连续、不中断、自然的。




此外,LiveAction 支持多个角色的实时动作捕捉传递和解析。(例如,在中等规格的 CPU 上最多处理 12 个角色,在更强大的处理器上可以处理 13 甚至更多角色。)




还有一点,它能解析相似或不成比例的角色,比如让人为飞龙定制动作,小鸡小鸭也是可以的。




3、语音控制动画


Project Intimate 是一项把动画动作库连接到自然语言词汇的新技术


也就是说,你可以用声音控制游戏角色的动作,跟它们交互,不管是 VR 角色还是 AR 角色。


视频演示了如何用声音控制VR/AR动画角色们


IKinema 的目标是让人用对话跟虚拟角色互动,就像在真实世界一样。模糊现实和虚拟世界的界限,把动画变成生活的一部分。


4、VR应用训练


本来 Orion 项目是 IKinama 基于 HTC Vive 套装为 VR 应用训练而打造的。




为真人打造简单的动画形象在 VR 中修理机器。




后来可能是因为 Valve 开放给第三方使用 Lighthouse,IKinema 就自己开发了一套基于 Lighthouse 和 HTC Vive 的全身动捕系统。


它使用了 6 个 Vive 追踪器,两脚各一个,腰部一个,双手各一个,以及头部一个,手上的定位点就是 Vive 手柄。整个系统只用了两个 Lighthouse 基站。


真实拍摄,没有后期制作,这舞姿精准的也是没谁了


最近,IKinema Orion 解决方案已经正式推出了,这套新型动捕系统非常便宜,一年的费用只要 500 美元,官网开放预定,可商用也可放家里用。


顺便提一下,IKinema 在混合现实领域的探索也没有停下来。


魔多,专注VR/AR和AI,有料更有趣

// share