Kakao揭示了新的元宇宙技术

鲍影苇
导读 Kakao Brain 今天宣布创建其最新的换脸技术Smooth-Swap,旨在通过增强的身份嵌入来扩展平滑换脸的能力。在用集成的平滑身份嵌入器替换现...

Kakao Brain 今天宣布创建其最新的换脸技术“Smooth-Swap”,旨在通过增强的身份嵌入来扩展平滑换脸的能力。在用集成的平滑身份嵌入器替换现有系统的复杂外部模块后,创新模型具有开创性的简化架构,可实现更快、更稳定的换脸。

Kakao Brain 的“Smooth-Swap: A Simple Enhancement for Face-Swapping with Smoothness”论文将连续第二年在即将召开的全球计算机视觉大会 CVPR 2022 上发表,标志着公司换脸领域的又一个重要里程碑研究。

今年,“Smooth-Swap”不仅成功地显着降低了其架构的复杂性,而且具有很高的商业化潜力,这两者都得到了首屈一指的计算机视觉会议的认可和奖励

在不牺牲图像质量的情况下,需要一个精确且一致的身份梯度来改变一个人的身份。使用监督对比损失训练的“Smooth-Swap”通过学习具有更高平滑度的嵌入来学习其稳定的身份梯度。这些增强功能解决了先前模型在合并手工组件和 3D 面部建模方面的弱点,这最终使其设计复杂化并需要复杂的超参数调整。相反,“Smooth-Swap”依靠简单的基于 U-Net 的架构和集成的平滑身份嵌入器来提供尖端性能。

“Smooth-Swap”的简单架构和改进的性能不仅使该技术在商业化潜力和更广泛的应用方面具有竞争力,而且还使其能够面对更困难的换脸场景,例如视频播放期间的换脸. “Smooth-Swap”提出了一种差异化的身份嵌入方法,并允许生成器生成更高质量的图像,特别是在改变对象的面部形状时。预计将使用 Kakao Brain 的“Smooth-Swap”开发各种类型的数字人,例如虚拟影响者、节目主持人和播音员,这可以实现快速稳定的换脸。

Kakao Brain 首席执行官 Kim Il-doo 表示:“我们很自豪和兴奋地向世界展示突破性的换脸技术‘Smooth-Swap’。“我相信,这项技术将加速换脸领域的创新,让我们更接近我们一直想象的令人难以置信的沉浸式虚拟世界,以及未来的数字人类服务。”

标签:

免责声明:本文由用户上传,如有侵权请联系本网删除!