你在短视频,直播里看到的影像都是真实的吗?揭秘直播背后的秘密武器——混合现实

《头号玩家》描绘出了一个丰富的虚拟世界,人工智能的发展又为虚拟形象运营铺垫了可执行之路。在虚拟与现实的边界线越来越模糊的当下,新的蓝海似乎正在开启一个新的故事,而你准备好成为主角了吗?

洛天依、初音未来在音乐领域的流行,让我们对“虚拟形象”早就不陌生了。如果说早些年的虚拟偶像文化只是二次元市场中较为活跃的亚文化现象,那么如今“3D虚拟形象”的背后已然孵化出一个庞大商业帝国的雏形。但由于效果不理想、成本偏高、缺乏支撑平台等原因成为行业的发展瓶颈,解决这些技术发展的限制,是一个迫切需求。

虚拟拍摄在专业领域的应用已经不用多去强调,《狮子王》、《奇幻森林》、《猩球崛起》这种好莱坞大片对于这一技术几乎已经操纵自如,这种“所见即所得”的拍摄方法,不仅对技术高要求,对设备的要求之高,也是让很多人望而止步的重要原因。目前市面上虚拟拍摄整套设备,应用在专业领域的任意套装价格,都将达到几千万至几十万元不等。

随着抖音、淘宝直播等短视频和直播平台的火爆,人们对新奇内容的追求,虚拟拍摄技术逐渐开始向大众化和市场化发展。你看到的直播中,主播身处的海景房很可能只是一个虚拟画面,甚至直播中的动画形象也是由真人通过动作捕捉技术实时虚拟而成的。这些都是通过什么实现的呢?

近期,我们接触到一家公司华严互娱,为我们讲解了这背后的技术。如何通过混合现实(MR)技术在平衡成本后,提供比以往系统更高级的功能和更好的使用体验,并快速在市场推行。

在北京拍出身在纽约的逼真视频

在华严的工作室,我们看到通过一台计算机、一部专门定制的工业相机和一块绿布,结合计算机上存储的虚拟场景视频,就能拍摄出你在纽约时代广场、巴厘岛海滩等各种场景的实时视频,这套DeepArt虚拟拍摄系统正是由华严互娱开发的。我们看到除了除了能够与 AI美颜系统、第三方直播系统等进行融合,还可以通过佩戴穿戴设备将真人在视频中实时变成动画人物。

看似简单的一套系统,为什么之前没有很快落地呢?因为虚拟画面和真实画面的结合上,还是存在很多技术难点需要突破。在此之前的系统虚拟拍摄系统,镜头或被拍摄的目标不能大幅度移动。例如,在虚拟演播室,镜头在固定位置对着主持人,如果大幅度移动,虚拟和真实画面的融合就很容易出现问题,导致穿帮。必须在硬件的运算性能速度够快和软件对画面的抓取和融合达到无缝衔接,才能保证摄影师能够像在真实世界中一样,随心所欲拍摄各种外景。

目前这套系统正被中、小型工作室所使用,例如淘宝商业视频服务商,抖音、婚庆及学校内容生产商等等,而我们可以看到这个市场仍然在迅速发展。

华严互娱联合创始人兼CTO宋健介绍说:“虚拟拍摄市场方面,苹果、Google、百度、这些巨头公司主攻的是民用级别,主要运用在手机。而在好莱坞卡梅隆这些大导演做出了最高端供大屏幕使用的设备技术。但是在商用市场,面对中、小型工作室,虚拟拍摄几乎是空白地带,有的是设备不能用,而有些是用不起,我们的产品就是来满足这块的市场的。”

而据观察:中、小型工作室,主要面向手机屏、电脑和电视屏,这些“小屏幕”内容的生产特点是,内容生产人员少,内容生产快。使用者需要一套操作简单、稳定的设备,使他们只需要经过简单的培训,就可以快速生产出所需要的内容。

便携+性能+稳定是如何实现的

很多直播摄影师一天要奔波不同的场次,外出摄影的场景也多,例如去婚庆场地拍摄、去顾客家里拍摄等等。所以这套设备越小越便携对他们来说将更为方便操作和移动。宋健也一直在寻找这样高性能的图形图像处理工作站来优化整套设备中的运算需求。如果把原先整套系统中的台式机替换成移动工作站,将大大改善整套拍摄系统的便携性和操作性。

而戴尔Precision移动工作站凭借良好的口碑进入了宋健的视野,经过进一步测试,可以看到通过双方的结合帮助华严的DeepArt方案的使用体验实现了多方面的提升。

“我们是从几个角度进行评估的。”宋健介绍道,

“首先,戴尔Precision移动工作站搭载了强劲的英特尔新一代处理器,将便携和性能完美结合为一体。配备的NVIDIA专业级别显卡,使得图形图像处理能力流畅无比,可快速地访问、传输和存储大型3D场景、视频,应对虚拟现实的画面融合完全不在话下,而经过Precision自带的Optimizer调优软件,更可根据目前在运行的软件,将所有部件的性能进行自动调配,发挥到最优。

针对拍摄方案便携性的要求,像我现在正在使用的Precision 5000系列移动工作站起始重量仅3斤多,尺寸和一般的笔记本电脑无异,加上微边框的设计,15寸屏幕的工作站,机身也就等于一个14寸笔记本大小,非常方便携带。与原先用塔式机作为视频传输处理和运算终端相比,大大减轻了整套解决方案的重量。

第三,虽然是小屏幕的画面,但影像的清晰度和色彩度都会对观看者的体验有很大影响。戴尔Precision移动工作站在画面的完整性和色彩的平衡性方面做得非常好,采用了采用4K Premiercolor技术,拥有100% Adobe RGB色域, 而全新的IGZO 4显示屏选项可实现更好的对比率、触摸支持和画质,而且降低了功耗,续航延长2小时。

第四,与戴尔进行合作,华严的售后服务也将得到更好的保障,戴尔全国销售和服务网络可以帮助华严的整套拍摄方案进一步完善售后体系,节省成本。

此外,戴尔Precision 5000移动工作站还具有续航时间长、支持单手触控等优点。”

针对不同需求的视频服务商,华严互娱提供了三种不同的设备配置,应对不同的需求。结合可靠高效的拍摄硬件套组,DeepArt为客户提供了大量的3D资产内容。客户还可以从华严互娱的资产服务器在线下载内容资产。对所有供下载的资产,华严互娱都按照电影级别进行制作,以满足客户不同的需求。如果客户需要更高的需求,华严互娱可以根据客户的要求量身定做资产。

现在,通过戴尔Precision移动工作站对华严互娱硬件和服务的优化,一个商用级的虚拟拍摄系统逐步成形了。我们看到华严互娱开发的DeepArt,填补了虚拟拍摄面对中、小型工作室的市场空白,将设备成本和使用门槛降到一个可规模化应用的水平,它或许会成为视频内容领域的一个催化剂,推动视频内容创作进入一个新高潮。