一键转换视频风格!SecretWeapons发布EbSynth

新知榜官方账号

2023-07-05 21:26:42

一键转换视频风格!SecretWeapons发布EbSynth

利用强大的GAN,已经可以实现一键转换照片风格的功能,比如将你拍的风景照转换成一副印象派的画作。现在,轻松转换视频风格的软件也诞生了!

SecretWeapons发布了一款简单而又强大的软件EbSynth,由布拉格捷克技术大学和Adobe共同研发。这款只有13.5M的免费工具,轻松几步就可将视频素材转换为各种你想要的风格“动画”。该软件将一个或多个手动生成的key帧的样式应用的视频的每一帧上,从而完成整个视频的风格迁移。

像这样想想看,各种特效制作、或者动画画师如果有了这一技术的加持,可以只挑选其中某个镜头进行特效处理,然后用这个软件瞬间获得大片视频,五毛也能做出酷炫特效!SecretWeapons目前免费开放下载,文摘菌也亲自试了下这款神奇的软件,挑选了目前超火的视频《长安十二时辰》视频片段,看看能否把它变成更加中国风的水墨画。

操作步骤

第一步:下载、安装软件

软件下载链接:https://ebsynth.com/

有Windows版本和IOS版本,会根据你的机型自行下载适配的软件。文摘菌用的是Windows系统。下载之后是个压缩包,解压即可。

第二步:准备素材

这个软件的使用需要一段视频,可以使用Premiere将素材转化为一帧一帧的图,生成帧图的教程可以查看链接:https://blog.csdn.net/qq_28372745/article/details/80743531

第三步:开始渲染

运行ebsynth软件,选择Keyframes和Video,然后点击Runall,就开始渲染啦,渲染结束后就会自动输出一个文件夹Out,里面就是渲染好的所有PNG图,再将这些图用Premiere做成视频就OK了!

技术原理

EbSynth是基于布拉格捷克技术大学和Adobe共同的研究,该项目由SecretWeapons创始人OndřejJamriška领导。EbSynth是基于最近在风格迁移和纹理合成方面的研究,使用的是非参数纹理合成算法。相比传统的关键帧程式化范式,EbSynth不需要知晓目标场景的底层3D结构,通过获得输入视频的原始颜色信息和近似位置信息进行转换,再加上patch-based合成算法,EbSynth在保持艺术意图的同时,视觉效果也相当卓越了。

该算法主要由五个引导模块组成:Colorguide、Maskguide、Positionalguide、Edgeguide和Temporalguide。

尽管已经达到了这样的效果,作者在论文中还是说明了这种算法有一定的局限性,比如人物身上光照的变化可能会对Colorguide引起误导,从而出现文摘菌在实测视频中出现的由于更换Key帧引起的结构变化,作者表示这是他们下一步努力的方向。

本页网址:https://www.xinzhibang.net/article_detail-6013.html

寻求报道,请 点击这里 微信扫码咨询

关键词

视频风格转换 EbSynth SecretWeapons

分享至微信: 微信扫码阅读

相关工具

相关文章

相关快讯