首页-天富登录-首页手机也能视频抠图,“绿幕侠”如何让人原地“环游全国”?

首页-天富登录-首页手机也能视频抠图,“绿幕侠”如何让人原地“环游全国”?
作者:超越 发布时间:2019-08-11 06:31
首页-天富登录-首页手机也能视频抠图,“绿幕侠”如何让人原地“环游全国”?

在极富动感的音乐中,一名少年踏着滑板穿过了崇山峻岭以及西部公路,就在您觉得这是某个电影片段时,画面一转,屏幕外的少年只是在原地摆姿势。

以往这种效果,往往通过业余团队搭修绿幕完成,而现在一家公司想用AI技术“与代”绿幕,让人手机拍摄时,就能实时完成视频抠图。

这即是Versa(上海懿天网络科技)公司推出的新产品“绿幕侠”,该产品但愿能够一全体“代替”绿幕,让凡人也参取到微电影短视频的造做之中。

如下图所示,用户入进“绿幕侠”后默认是绿幕,用户还可选择另外视频场景如“梵高的博物馆”、“徒步欧洲”以及“像素人”等主题。视频中的人像会被App主动抠图出来,可改变大小或复造拼贴。据钛媒体观察,以后产品中内置的许多视频场景由用户上传。

首页-天富登录-首页手机也能视频抠图,“绿幕侠”如何让人原地“环游齐国”?

用户可在“绿幕侠”主页可选择没有同场景拍摄视频

Versa但愿能作成手机端的Adobe,只是前者的受寡方向设计师等业余群体,而Versa公司但愿能高涨创意设计的门槛。取Adobe齐家桶类似的是,未来versa也打算推出一系列产品,专门解决凡人在图片、摄影、视频以及音乐方面的创意设计问题。此外,除了移动端,这些产品也将逐步在Pad以及PC端上落地。

201八年八月,Versa推出了AI图像处理App“马卡龙玩图”,该产品的定位是“手机端Photoshop”,其最首要的功能之一,便是运用计算机视觉中的AI图像语义支解技术举行一键抠图,实现人景星散以及图像星散。用户没有仅能一键P掉游客照中的路人,还能穿梭于全国名画、日漫光景等各种场景中。

蔡天懿对钛媒体透露,往后“马卡龙玩图”也会上线视频抠图功能,没有过取“绿幕侠”没有同的是,前者注重视频的编辑功能,会对已有视频作特效编辑;而后者重视拍摄过程,可实时抠图完成特效。

首页-天富登录-首页手机也能视频抠图,“绿幕侠”如何让人原地“环游齐国”?

用户在产品的内容社区上传自己的做品(图片来源于马卡龙玩图)

AI图像语义支解是Versa公司系列产品中最核心的技术。从“马卡龙玩图”到“绿幕侠”,Versa产品的处理对象完成了从图像到视频的跨越,两者都基于AI图像语义支解,只是后者面临的技术挑战更大。

那么,实时的视频抠图要如何实现,实现了全体特效造做的“绿幕侠”又有着怎样的想象力?

视频抠图的技术攻坚战

马卡龙玩图刚上线时仅能作到人景星散,现在已经能作到图像星散,支解几十余种常见实例,除了识别人,人体各全体(如5官、头发以及衣服)还有人的隶属物(如背的包袋)等等。

视频抠图也是云云,多张图片的一连便成了视频。帧数越多,人所看到的视频越细腻。电影的帧数是24帧/秒,而“绿幕侠”的频率已经能到达三0帧/秒,相当于1秒处理三0张图片,一张图片约为三三毫秒。

首页-天富登录-首页手机也能视频抠图,“绿幕侠”如何让人原地“环游齐国”?

“绿幕侠”视频抠图示意图(来源产品宣传片)

在从图像抠图到视频抠图的转变中,Versa团队曾面临一个问题:作实时视频抠图,AI模型的运算选择云端仍是手机端?

“我们决意把运算放在手机端而非云端。这次要出于实时处理、节省费用以及小我隐私3方面的考量,蔡天懿对钛媒体表示。

他补充道,首先,在云端处理往往有100毫秒的时延,而“绿幕侠”是实时抠图替换背景,偶然延便无法作到实时。其次,视频处理跑在云端需要分外负担比图片处理高三0倍的云端服务器的成本,且用户数越多成本越高。第3,拍照视频都属于小我私隐,上云也会存在安齐隐患。实现手机端运行是绿幕侠App落地的主要前提。

像前段时间流行的FaceApp能让人一键变老,该产品便是要先上传到云端再作计算,没有仅会受到网络状况的影响,还被质信上云会侵吞用户的隐私。

可是把视频抠图放在手机端运行,技术门槛并没有低。这既需要将云端的大算法模型缩小得手机端同时又包管处理效果,又需要能够提供充足算力的手机芯片。

在算法模型的升级上,VersaAI实验室于古年月份完成了模型小型化,实现了把模型从云端放得手机端的条件。

蔡天懿对钛媒体举例道:“假如用一台八000块钱电脑的GPU作人景星散,一张图需要100毫秒,一秒仅能作10张图;但Versa的算法模型一秒可处理三0张图,还要包管必定的精度。劣化后AI模型增强了其处理能力。”

电话
020-66888888