视频里照片换成自己的,抖音特效变脸视频怎么拍

淘宝运营 2022-04-09 14:34:22
  

  作者:李泽南   

  

  在Tik Tok,平均每五个提交的视频中就有一个使用特效,特效已经成为一种流行的表达方式。   

  

  随着AI算法的发展,手机上短视频应用上的特效越来越花哨,各种变脸、美颜应用层出不穷。去年六月   

  

  Tik Tok推出了“化漫画为漫画”的特效,吸引了来自Tik Tok的各界明星和用户前来体验,并陆续打造了属于自己的漫画形象。漫画特效成为当年的爆款,将近1700个。   

  

  万名用户尝试使用,播放的视频数达到数十亿次。   

  

  在Tik Tok的应用程序上,用户只需一挥手,就可以生成自己的实时卡通图像,面部特征、发型和服装都可以准确变换。   

  

     

  

  特效打开后,欧阳娜娜和她的猫就变成了高萌漫画。   

  

  一年多过去了,Tik Tok推出了哪些有趣的特效?7月28日   

  

  来自Tik Tok的工程师为我们介绍了由Tik Tok和火山引擎联合举办的“智能特效”技术开放日。除了面向普通用户的工具,字节跳动还将带来最新的AI   

  

  这项技术对其他制造商开放,并鼓励CG设计师参与原创互动内容的制作。   

  

  活动期间,抖音发布了第一份《抖音特效数据报告》,首次向公众展示了其在特效应用领域的技术进步和落地情况:2021年上半年,Tik Tok平台日均在线人数突破100。   

  

  新特效,平均每五个提交的作品中就有一个使用特效。   

  

     

  

  这些特效是由火山引擎、Tik Tok特效团队和活跃在Tik Tok的无数特效设计师共同打造的。   

  

  抖音特效的蜕变史   

  

  给视频添加特殊效果并不容易。2016年,Tik Tok主要依靠平面设计和第三方技术实现特效。到2017年   

  

  2006年,字节跳动成立了一个特效团队,开始自研技术。Tik Tok设计中心负责人王云辉说:“之所以做出这个决定,是因为我们发现特效道具贴纸的出现可以鼓励用户投稿。那一年,Tik Tok推出了爆款产品狗头贴纸。   

  

  很快,Tik Tok特效团队使用的技术从传统CG升级到深度学习。2018   

  

  2006年,Tik Tok推出的特殊控雨效果成为爆款。最近一段时间,这样的爆款越来越多,特效团队也成长到了几百人。   

  

  我们可以看到,最近,漫画脸特效在Tik Tok很流行。很多明星自发使用漫画脸,用户生成的漫画脸照片甚至成为他们的社交账号头像。   

  

  该产品结合了人工智能领域流行的GAN技术。“我们和甘的第一次接触   

  

  这是一次内部技术分享会,”王云辉说这项技术带来的创意很好,但在实践中也存在一些困难――最初的效果与实际水平相差甚远,与艺术形式相比应该是抽象的。为了最终能在Tik Tok上线,整个团队最终决定以漫画的方式行动。」   

  

  Tik Tok特效团队几乎筛选了所有的漫画风格,最终确立的风格包含了很多元素,包括日本人、中国人和汉人。它的细节丰富,颜色透明,最重要的是它的形象更加阳光。   

  

  选择风格后,工程师们引入算法模型,持续优化模型两个多月,更新迭代了1000多个版本。最忙的时候,我用了几百个显卡同时运行模型。   

  

  终于在2020年6月,漫画脸特效上线,只用了三天时间就拿到了上千万的投稿,成为了Tik Tok特效的里程碑。   

  

     

  

  据统计,仅2021年上半年,Tik Tok就有超过8000万用户首次使用特效。   

  

  现在Tik Tok介绍的特效涵盖了四大类:装饰、互动、风格、场景。他们还帮助传播非物质文化遗产,并引入了戏曲头饰、京剧、越剧小生和川剧变脸的效果。在Xi的西安钟楼、重庆的洪亚东、北京的三里屯等地标,人们也可以打开手机摄像头观看。   

  

  AR装饰效果。   

  

  在抖音,做自己的特效   

  

  要成为一个好的视频特效工具,需要实现对目标点的检测和跟踪以及对图片的理解,这就需要使用最新的计算机视觉技术。得益于最近深度学习的巨大发展,我们现在可以在手机上实现实时的真实场景物体识别,以及物体分割、渲染效果和应用。   

  

  CG技术将虚拟图像叠加在真实场景上,我们可以实现各种有趣的效果。   

  

  “在影视等行业,近年来AI技术的提升让特效更加逼真,但同时也增加了成本。在好莱坞视觉大片的制作中,特效的成本可能占了   

  

  60%,如果只使用一台机器进行渲染,一秒钟的特效可能需要50天。火山发动机特效技术专家杨辉说。   

  

  在Tik Tok这样做显然是不可能的。工程师需要在降低成本的同时尽可能使用先进的技术。   

低应用的门槛,让更多人能够参与到创作的行列中来。

  

  

背靠业内最多的用户,抖音的特效功能通过多轮产品迭代,拥有完善的组件模块化、适配、资源下发能力,大幅度提升了应用便利性。抖音特效的稳定性也很高,在接口层面的崩溃率不到

  

10 万分之一。

  

抖音还花费近两年时间从零到一打造了自己的渲染引擎,相比人们熟知的 Unity 和 Unreal,抖音引擎专门针对短视频 AR

  

特效,体积更小,平台适用范围更广,同时也具备高效的渲染效果。

  

迄今为止,抖音特效开放平台已经包含了 100 余种算法,覆盖多种场景,支持了字节的 40 多项业务。

  

字节跳动研发的高性能机器学习训练平台、端上压缩算法和异构推理引擎,未来都会通过火山引擎面向企业平台进行开放。在活动中,字节跳动宣布面向企业客户开放上万款抖音同款特效,包括猴哥、漫画惊讶脸等热门道具。现在,使用火山引擎的特效工具套件,一名设计师仅需五天就可生产出自己的

  

3D 特效。

  

在火山引擎的特效服务体系中,会有字节跳动的一线专家协助客户打造定制化的解决方案,已有的特效道具资源也被开放,包括拍摄资源、编辑资源和 MV 模板资源等。

  

除了短视频,视觉特效的应用场景还有很多。在火山引擎中,AR 看车、AR

  

试妆和虚拟形象(数字人)等技术已经落地。未来还有可能出现互动广告等全新交互形式,让人们获得更好的购物体验。

  

「随着 5G 时代到来,网络延迟降低,带宽增大,很多计算将不会在本地完成,我们可以把 CV 算法做得更精准,CG

  

效果更加酷炫。会出现端云协同,多人互动的新类型特效,未来也有可能会出现手机之外的新移动端入口,」杨辉说道。

  

相关文章

热门文章

最近发表