一、空间计算时代来临
半月前,苹果全球开发者大会2023重磅开锣,传说中的VR/AR装置Apple Vision Pro惊艳亮相,它被定义为是一台革命性的空间计算设备,也由此向行业宣告:空间计算时代,正式开启!
让时间回溯到去年11月,天图万境发布的感知虚拟制作平台,其实已具备了利用人工智能技术,用一台摄影机实时呈现4K、60帧、影像级的稳定空间深度还原能力。这标志着,国内技术站在了世界科技发展的超前沿,天图万境也成为首批抢滩空间计算的技术提供方。
6月15日,上海VPS&DHDC2023(国际虚拟制作峰会暨数字人开发者大会)举办,全景式解构了数字内容生产与运营方面的技术革新,探讨了虚拟制作、AIGC、数字人等领域的技术挑战和产业趋势。
天图万境作为引领新一代视听技术的探索者,受邀出席此次大会。天图万境创始人、导演图拉古发表主题演讲,详细阐述了感知虚拟制作的8大AI关键技术核心,以及技术的商业化前景。
图:会议现场
二、感知虚拟制作8大关键技术
图拉古表示,在超算时代,算力提升带来了LED虚拟制作的快速发展,但LED屏拍摄仍然受实际生产和物理极限的约束,LED屏不可能无限放大,这堵物理的“墙”也无法解决景深变化问题。同时,将虚拟背景投射到屏幕上,再由摄影机对发光的LED屏进行拍摄,两次转变都降低了画面质量。LED屏拍摄,本质上是从数字向物理世界的转化,犹如从数码时代回到胶片时代。
而天图万境发布的感知虚拟制作,是通过人工智能进行空间计算和数字修复,将绿幕拍摄后的内容导入引擎中,通过引擎的空间计算,把绿幕拍摄的二维影像还原成三维图像,并通过数字渲染将三维图像渲染出来。这一过程对应的是从物理世界到数字世界的变迁,可以对标胶片到数码时代的跨越。
图:天图万境创始人、导演图拉古
这一技术上的革新,得益于天图万境在计算机图形图像领域的长期深耕,以AI图像分割、AI阴影投射、AI光场还原、AI色彩融合、AI材质识别、AI空间计算等核心技术为基础,搭建了视听产业的智慧生产体系。
利用AI图像分割,可以实现全自动化地图像处理,无损、准确地识别绿色植物、穿绿色衣服的人,而且无论环境、灯光多么复杂,系统都可以清晰地抠出人像,建立干净丰富的色彩空间,而且智能化地做到了“一键处理”。
让真实世界中的物体,无缝融合到虚拟世界中,最难处理的就是光、影关系,AI阴影投射和AI光场还原则解决了这一世界性难题。利用人工智能,首先将真实的影子清晰地抠像出来,再将影子作为贴图切回到三维引擎中去,这样就会得到与真实光源一致的影子,并带有三维引擎中的折射和光的遮挡。AI光场还原,不是将引擎中的画面作为一个二维的面片去点亮,而是将它作为一个带法线、带网格体、带空间计算的图形点亮,由此可以重新更改整个图像的光源。
演讲中,图拉古重点介绍了感知虚拟制作中的AI渲染和空间计算能力。传统方式中,空间深度的计算,可以使用激光雷达,或用双目摄影机,甚至可以使用连续的单目帧进行后期求解。而天图万境的感知虚拟制作,实现了仅通过一台摄影机,不额外增加任何设备,即可在引擎中实现“实时、4K、60帧稳定的空间深度还原”,无需购买任何的深度传感器。
图拉古总结了感知虚拟制作的五大优势:
图:图拉古做主题演讲
1、放大了传统绿幕的拍摄优势,打破了LED拍摄物理空间的限制,不改变从业者习惯;
2、技术极大缩减了制作时间周期,降低了拍摄成本,成效快、质量好;
3、全部内容记录在引擎中,可以在后期对每一帧特效、每一个场景做任意的处理和再编辑;
4、所有制作内容实现了全数字化,形成了“一树多果”的生态,一次拍摄即可输出影视、游戏、3D、VR、AR、数字资产等内容;
5、100%自有专利技术,操作简单方便,软硬结合的解决方案对应到一个设备箱中,将它带到任何一个绿棚,可以秒变“智慧虚拟拍摄棚”。
坚持成就梦想,正是在感知视听领域的持续研发,让天图万境的感知虚拟制作技术结出了“创新之果”。
随着5G、人工智能、VR/AR等新技术、新产品的快速发展,数字内容产业未来蕴藏着巨大的价值潜力,感知虚拟制作拥有广阔的发展蓝海。
“我们相信,没有什么技术,比实现人的梦想更先进!”图拉古表示,未来天图万境将以自研的感知视听技术,降低虚拟制作的门槛、降低成本 ,让每一位合作伙伴都能够便捷、快速的应用、赢利,同时赋能行业健康、绿色发展。
上海国际虚拟制作峰会暨数字人开发者大会
主题为“虚拟世界 真实精彩”的上海国际虚拟制作峰会暨数字人开发者大会(VPS&DHDC2023)于2023年6月15日在上海申迪文化中心举行。
大会由国际先进影像协会主办,上海国际旅游度假区管委会、浦东新区文体旅游局、北京电影学院中关村、数智人工智能联盟等单位支持协办,力图通过推进以虚拟制作、数字人、AIGC等为代表的数字内容技术应用拓展和产业模式落地,实现技术与应用的充分链接,深度展现技术效能与领域延展,高度黏合数字内容“硬软双核”,赋能传统行业的数字内容供给与数字化融合转型。
