近日,美图公司旗下ai数字人生成工具dreamavatar上线,首期推出“ai演员”数字人服务,以ai驱动为核心,服务于视频内容创作、影视处理与剪辑等生产力场景。
虽然dreamavatar的“ai演员”功能是美图在影视行业的初次尝试,但是在影视行业,数字人的应用已经相当普遍,且都是刚需。数字人主要用于代替或者辅助真人演员,实现变脸、变形等一些难以或者无法用真人完成的效果。比如在电影《复仇者联盟4:终局之战》中,钢铁侠的数字人替代了真人演员在太空中的戏份。
当下,数字人的生成分为cg和ai两条技术路线,但cg技术生成的数字人比ai技术生成的数字人成本更高。根据公开资料显示,传统的cg影视做特效人物,不仅需要专业的设备投入,还需要花费大量的时间和预算。如一个普通的机器人、怪兽特效,往往需要几周甚至几个月的时间,花费高达几万到几十万美元不等的费用。而ai技术利用深度学习和神经网络,无需人工参与和干预,可以自动化生成高质量和多样化的数字人,从而节省了人力和时间成本。
dreamavatar“ai演员”数字人的生成,不需要专业设备,一台手机就能轻松搞定。用户只需要将拍摄好的视频素材导入,并指定视频里的人物,剩下的一切都交给ai来操作。ai会进行人体检测、跟踪、擦除、替换,以及背景修复,自动把真人替换成数字人。利用3d人体姿态估计和驱动算法,dreamavatar的ai演员能够做到动作与真人完美同步;ai还会并行通过相机姿态估计和跟踪,以及光照估计算法,让数字人和环境自然融合,更具真实感。最后,将前面这一系列ai的处理,汇总到3d渲染并输出,ai演员的特效大片就诞生了。
目前,dreamavatar“ai演员”支持最长10秒视频的转化,共推出了机器人、兽人、类人三大题材共计11个不同风格的数字人形象,每个题材从造型风格、渲染风格都做了不同方向的细化,以给到用户多样性的体验和选择。
dreamavatar“ai演员”的功能极大提高视频创作的效率,将原本以天为单位的制作周期,缩减到小时,同时省去了专业设备成本和建模渲染等人力成本,提高生产运营效率的同时,做到降本增效。不止是专业用户,大众用户也能借助dreamavatar的“ai 演员”功能轻松创作数字人的视频大片。
此外,dreamavatar的另一场景“ai主播”功能已先行落地在美图矩阵开拍app,为视频口播创作者提供更多元的内容表达方式。除了视频创作者,不同的品牌客户,也可以通过接入api和sdk接口的方式,打造品牌专属的数字人。
未来,dreamavatar会继续探索数字人 aigc的落地场景,拓展使用场景,服务更多的行业。