面捕动画更精准！基于GPU加速的实时AI面部

“ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”

中国很有影响力影视特效CG动画领域自媒体

现今这个数字化时代，AI几乎是渗透到了各个领域。技术发展也是日新月异，差不多是隔段时间就能给大家带来个新惊喜。

动画制作领域也不例外，新技术新工具层出不穷。这不，又推出了一工具，用于的全新GPU加速AI动作捕捉插件。

是一款由 RTX GPU提供支持的AI面部追踪器，能够从标准720p 摄像头和传统视频文件中提取演员面部运动数据，并将其实时流式传输到动画软件。

同时兼容的自动唇形同步系统,可以为多种语言生成精确的唇形运动。

如果预算有限，不能购买昂贵动作捕捉制作硬件，可以考虑一下，同样能为你提供顶级的面部捕捉效果。

从任何视频源捕捉表演

【实时面部追踪】

与独立的USB网络摄像头或配备了集成网络摄像头的笔记本电脑兼容,可提供在720p分辨率下每秒30帧的优化跟踪。

通过头盔式设置调整视频方向的能力，可以在同步进行身体和手部跟踪的同时，保证稳定的面部捕捉。

【独立的基于视频的检测】

避免与专业动作捕捉设备相关的高昂成本,选择消费级相机或普通手机来录制素材。

对于缺乏原始素材的动画师来说,始终有一个强大选择,就是适配、等现有的视频。

【支持远程协作】

凭借从标准录制视频中进行准确面部捕捉的能力,可以让制作室与世界各地的专业演员或配音人员无缝协作,将动画生产力从设备依赖及时间/位置的限制中解放出来。

校准准确性和个性化

可以优化面部的表情范围,建立中性状态作为表情的基准；通过进一步校准眉毛运动来捕捉演员的真实表情和个性化表演。

【Live模式校准】

通过简单直观的引导过程定制角色的面部设置以匹配现场表演者，可以即时接受动画反馈进行彻底的调整。

【模式校准】

当从单个视频源获得理想校准姿势有困难时,可以在多个视频文件中搜索校准帧。

【全光谱动作捕捉优化】

还提供了一系列工具来解决诸如噪音、抽动、干扰和错误触发等问题。

力度平衡

根据演员的个性调整面部区域的力度,平衡表情强度，以捕捉更逼真的表演，或者转变为另一种动画风格。

平滑滤镜

消除由于超出跟踪角度、头发过度遮挡、照明不均匀及阴影等原因导致的跟踪数据中的不良抽动（ ）。

降噪

由于抖动会给各个等级的运动追踪带来困扰，去噪可以有效地平滑不稳定的运动,同时不会损害性能的广度。

抗干扰

的抗干扰功能，可以减少非必须的头部、眉毛和嘴巴运动；有效解决跨区域干扰和触发导致的表情混乱问题。

精确的音频匹配

【单通道音频同步】

与需要单独的音频对齐才能完全同步语音和表演的面部捕捉解决方案不同,可以一次性捕捉音频数据和面部动画。

无论是来自实时网络摄像头还是预先录制的视频,都可以快速生成语音同步动画。不论源媒体的帧率设置为24、30还是,引擎都将根据源帧率持续生成音频同步动画。

【嘴唇和舌头发音】

可以实现其他面部捕捉无法实现的复杂嘴唇和舌头运动。

通过从语音中提取文本数据,可生成一个额外的 （控制唇型关键帧的时间轴），以实现精确的口型同步。

如果想要完全控制面部动作捕捉的细微之处,可以利用的面部键编辑器、面部图层和曲线编辑器。

【多语言支持】

可以通过绕过语音转文本的方式,将口型同步功能扩展到英语之外的其他语言。

可以通过提供其他语言的文本脚本来提高非英语语音的口型检测和同步精度，也有免费工具可以将其他语言的音频转换为对应的罗马音,来帮助口型同步。

【时间码同步实现无损录制】

通过时间码同步匹配,可以根据视频的帧率进行无损帧录制,而不受计算机规格和性能的限制。

价格和系统要求

End