查看: 2270|回复: 0

新的DI4D HMC捕捉系统

[复制链接]

906

主题

954

帖子

3950

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
3950

最佳新人

发表于 2019-3-27 20:47:37 | 显示全部楼层 |阅读模式
领先的面部性能捕捉公司DimensionImaging(DI4D)将在即将举行的2019年游戏开发者大会(GDC)上推出其新的头戴式相机(HMC)系统。新的DI4D HMC提供了与DI4D后处理管道一起使用的HMC捕捉到的最逼真的面部性能数据。尽管DI4D HMC将增强大多数第三方面部处理管道,但与DI4D自己的高级面部处理解决方案一起使用时,它的设计特别有效。
新系统使用了一对4mp立体摄像机和同步的车载闪光灯LED照明,以确保摄像机焦距和整个面部的均匀照明,同时最大限度地降低了拍摄对象的视亮度。

噶似的发顺丰.jpeg


DI4D新型头戴式摄像机系统,用于高保真面部性能捕捉
世界上许多产品都使用由TechnoProps制造的HMC单元,这是高端HMC的黄金标准。但随着福克斯电影制片厂购买技术道具和创始人格伦·德瑞(Glenn Derry)成为福克斯电影制片厂VFX实验室的副总裁,再加上迪士尼与福克斯电影制片厂的交易,其他几家公司正在寻求生产HMC。其他公司已经生产了HMC,如标准偏差等,还有更多将在GDC或不久之后公布。

虽然使用iPhone x rgbd人脸技术进行人脸跟踪有很好的解决方案(而fxguide将在下周介绍),但对于高端工作而言,具有专用硬件的精确HMC仍然是大多数AAA工作室和VFX公司的首选机型。
DI4D成立于2003年,总部位于格拉斯哥、英国和洛杉矶。DI4D为电影、电视、视频游戏、虚拟现实和高级研究应用中的视觉效果提供4D面部性能捕捉服务、系统和软件。最近使用DI4D的项目包括华纳兄弟电影《银翼哔~2049》和《神奇的动物在哪里》,新的Netflix动画选集《爱,死亡和机器人》,以及目前正在制作的多个电影、电视、视频游戏和虚拟现实项目。

lovedeathrobots_10.960x540.jpg


轴动画。注:爱,死亡和机器人,没有使用生产的HMC,因为它还没有发布。
Di4d在《Netflix Love Death》和《Robots》的四集中做了面部表情Mocap。DI4D团队与轴动画和模糊工作室合作拍摄这些剧集。
主要的研究客户包括格拉斯哥大学、伦敦帝国理工学院和达拉斯儿童医院。DI4D的专有运动扫描技术捕获4D数据,包括视频速率3D表面扫描,跟踪密集的固定拓扑网格。DI4D解决方案不需要任何面部标记、化妆或结构光,提供高保真面部运动捕捉数据,提供MOCAP演员面部表现的细微差别。

Blade-Runner-2049-Rachael-Image-660x277.jpg




DI4D为瑞秋做了非常高端的工作,在获得奥斯卡奖的影片《2049》中,DI4D用7400垂直网格追踪女演员的面部表现,这是DI4D迄今为止追踪到的最密集的网格。但是他们随后将跟踪数据的分辨率提高到了大约30000个顶点。这就产生了非常逼真的面部动画。

4F7A4355_small_output-660x440.jpg


这里有一个小背包迷你电脑,是艺术家戴的

GDC 2019

DI4D团队还将为GDC展示一个新的技术演示,其中包括使用新的DI4D HMC捕获的新版本的DI4DS面部性能,并使用其最新的4D处理管道进行处理(脱机)。该管道基于每帧3D扫描数据,这些数据来源于被动立体摄影测量和随后使用光流创建点缓存的网格跟踪。然后,这将“解决”绑定到渲染,并在UE4中实时呈现。新的演示预计将令人印象深刻,旨在演示“电影质量”性能驱动的面部动画,特别是针对用于高质量游戏。

D44HMC

DI4D HMC的设计是为了让一个表演演员可以进行拍摄,并且可以由导演或主管远程查看,但是实际的面部处理预计不会实时完成。DI4D单元既不传输完整的视频,也不处理演员所戴的电子设备。”当前的(初始)模型假定离线处理具有高质量,但是拥有我们自己的头盔的一个优点是它为我们未来的开发和定制提供了灵活性。在未来,摄像机可以直接连接到常规尺寸、功能更强大、能够进行更复杂的实时处理的PC上。DI4D计划在2019年的Siggraph上展示更多的“实时”功能。

第一个版本的功能是:
1可以从远程录像机本地查看视频流。
2可以在远程录音机上本地启动/停止录音。可以用一个按钮在多个记录器上启动/停止记录。
3可以本地查看和控制从远程录音机播放以前的录音。包括循环、擦洗和到特定的时间或帧。可通过多个录像机启动回放,并通过时间码进行同步。
4可以本地执行“实时”校准(单个系统),如下所示:
    1按校准按钮启动特殊校准模式记录。
     2按“停止”,在此点上一个录制将自动打开并以特定帧增量播放。
     3当找到~1fps时,圆将被检测并显示在回放视图上。
      4将执行校准,校准将存储在本地,并传输到远程记录器,以便与其他客户端共享,以便在本地软件必须重新启动时重新使用。
5在设置上,您可以在执行上述1-3中的任何一个的同时本地构建和查看低帧速率的3D模型,前提是具有有效的校准。如果要在3D中查看特定帧,可以在播放过程中拖动或暂停。
6您可以在Web浏览器中本地查看与从另一个di4dlive实例启动的实时或回放视图相对应的图像。



GALAXIX首发译文
本新闻为GALAXIX动漫大陆首发。如需转载请注明本站地址
www.galaxix.com/bbs
www.galaxix.com

关注galaxixv,官方微信公众号。
GALAXIX UE4 讨论学习群 140439020
UE4精英学习群  12762592
UNITY学习群   194092348
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则


快速回复 返回顶部 返回列表