揭秘春晚全息AR“黑科技”，微美全息（WiMi.US）5G高仿真视觉AI搭建

春节是全国人民以及全球华人最重要的节日,没有之一。每年除夕最重要的事恐怕就是用手机拜年、抢红包、看春晚。拜年的方式从书信变成了微信,红包也从长辈给的信封变为一场网络游戏。

其实,春晚也在变。年轻人喜爱的明星越来越多,春晚节目的形式也越来越年轻、酷炫。2021总台牛年春晚,与其说是全国人民的一场文艺盛世,倒不如说是前沿“黑科技”在传媒领域的一次练兵与实践。比如,AI+VR裸眼3D拍摄,全景自由视角拍摄,交互式摄像控制技术,让影像的构建与诠释更为绚丽多彩;比如,4K智能直播、“VR视频+三维声”直播、8K超高清频道直播,实现了播出领域的多项突破。

2021牛年春晚的舞台效果太美了,在视觉表现、科技创新上做了诸多尝试,科技与传统文化相得益彰,高科技让传统年味更浓。很多看了2021年央视春晚的人会对这个问题感兴趣——其实,周杰伦、刘德华是通过AR、云技术“出现”在现场的。央视春晚走过37年,越来越成为创新视觉技术的见证。

看2021央视春晚,很多人会感到舞台效果很赞,最酷炫的当是AR技术和3D效果。

周杰伦一曲《莫吉托》,在XR技术下把舞台“搬”到海滨城市,使人物、道具跟虚拟场景互动和结合,让我们看到周杰伦带着乐队,开着粉色飞车与观众共享夏日风情。

以前,人们总渴望去看一场现场的舞台表演,甚至利用VR技术实现人在家中也能身临其境的快感。

如今,有一种技术能让我们在家中看着电视,享受现场观众看不到的奇妙画面。这就是AR技术(Augmented Reality,即增强现实)。

通过一块屏幕,这一技术可以让观众不仅能看到现实存在的画面,还能看到一些基于真实空间打造的虚拟画面。

(图片来源2021年春晚)

全息投影是本次央视春晚的一大亮点,最令人印象深刻的就是十几个克隆李宇春同台演出的场景。

早在2015年春晚,歌曲节目《蜀绣》中就出现了五个李宇春,较早用到全息投影技术。这一技术使得观众不带任何眼镜,就可以看到立体的虚拟人在面前。不过现在回看当时的效果,颗粒感还是很低的。

本次春晚,李宇春再次带来演唱,舞台上出现18个李宇春,换上18套华服,站成一排。时隔五年,全息投影技术已经大大进步,时空切换,中国风+科技感完美结合。

(图片来源2021年春晚)

相关行业分析师称,从全息投影的能实现效果来看,当前还是个“婴儿”,还有很大的发展空间。随着这一技术的发展,之后我们将在更多生活场景,比如全息投影的爸妈像真人一样在旁边唠家常,云喝茶、云吃饭等等。

2021年央视春晚就将依托5G技术的发展,利用“云”传播技术实现跨时空的同台互动表演,AR、XR、电影特效技术也就这样闪亮登场。

然而疫情的到来却意外使全息AR技术更多的搬上台面。与传统的秀场相比,全息秀场打破时间和空间的局限,在艺人无需真人到场的情况下,让不同地方的观众同时看到一样的演出,让很难有机会见到真人的粉丝借由全息影像解解馋。这就是全息投影技术,就是利用干涉和衍射原理记录并再现物体真实的三维图像的记录和再现的技术。全息投影技术不仅可以产生立体的空中幻像,还可以使幻像与表演者产生互动,一起完成表演,产生令人震撼的演出效果。适用范围产品展览、汽车服装发布会、舞台节目、互动、酒吧娱乐、场所互动投影等。

不同于其他传统的3D显示技术,全息显示无需依赖任何外部设备(3D眼镜、头盔),注重在稀薄的空气中成像,裸眼观察“悬浮状”幻象,“凌空虚指”进行触控交互。而裸眼3D技术是利用光栅原理,虽然效果与全息显示技术无异,但其对距离和角度有严格要求,且容易造成眩晕及左右眼画面不一致的现象。比较而言,全息显示技术具备了无视角限制,全方位查看与实物无异的优势,能够与空中成像进行深度交互,这是触控感应交互的一大新突破,满足了人们对自然真实、三维视觉效果的追求。

未来,当全息触控交互技术正式落地,每个人如同拥有了一扇“任意门”,即刻能通向心中的目的地。人们只需在室内使用设备进入新场景,新场景或是现实世界里的地区,或是虚拟游戏世界,以各自的“分身”全息投影影像进入场景,拥有“瞬移”技能。还可以对影像的角色进行换装、任意更改发型等。挥动手掌便可在空中放出数字显示面板,手指能在面板的任意位置滑动、点击,凌空从界面中抽取出实体摄像头进行拍摄或在面板上搜索读取资料信息,这些特征将直接取代手机的功能。

国内全息技术为代表的微美全息团队通过多年的技术研发,已经打造出第三代6D光场全息技术产品,其仿真用户体验可以用叹为观止来形容。全息虚拟舞台和全息虚拟角色(全息内容IP)是虚拟现实产业中的核心产业之一,也是在国际上被证明为盈利最强的产业之一。微美全息这家公司已集全息AI云移动软件开发商、处事商、运营商身份于一身,也成为海内领先的全息AI领域整合平台之一。

微美全息成立于2015年,纳斯达克股票代码:WIMI。微美全息专注于全息云服务,主要聚集在车载AR全息HUD、全息脉冲激光、头戴光场全息设备、全息半导体、全息云软件、全息汽车导航等专业领域,覆盖从全息车载AR应用、车载全息激光应用、全息视觉半导体技术、全息软件开发、全息AR广告技术、全息AR娱乐技术、全息ARSDK支付、汽车全息通讯等全息AR技术的多个环节,是一家全息云综合技术方案提供商。

与国内同行相比,微美全息(WIMI.US)已经建立了一个全面的全息AR内容库,全息AR内容的格式涵盖从3D模型到全息短视频。截至2018年12月31日,共拥有4,654个即用型AR全息内容,可用于微美的全息AR产品和解决方案,涵盖范围广泛的类别,包括动物,卡通人物,车辆和食品。其中,2,961个用于教育场景,851个用于旅游,739个用于艺术和娱乐,103个用于科普。此外,微美的内容库还通过从第三方获得许可的受版权保护的内容进行了丰富。微美与各种内容所有者合作,包括品牌方、电影制片人和人才代理商,以将高质量IP转化为AR形式。其商业应用场景主要聚集在家用娱乐、光场影院、演艺系统、商业发布系统及广告展示系统等五大专业领域。

由于5G通信网络带宽的变化,高端全息应用逐渐应用于于社交媒体、通信、导航、家庭应用和其他应用场景。微美全息的计划是通过5G通信网络,在两个核心技术:即全息人工智能面部识别技术和全息人工智能面部修改技术的基础上,提供全息云平台服务。

全息三维人脸识别软件的开发基于微美全息的全息成像特征成像检测与识别技术、模板匹配全息成像检测技术以及基于深度学习和训练的视频处理与识别技术。传统的二维人脸识别技术是一种基于人脸特征的生物识别技术,它从人脸图像或人脸视频流中获取信息,并自动检测和跟踪目标人脸。基于合同,微美全息确信全息三维面部识别技术是由全息成像捕获和三维肖像相结合的生物识别技术。微美全息专注于软件技术的开发和应用,拥有人工智能、机器识别、机器学习、模型理论和视频成像处理等技术。全息三维人脸识别技术是一种利用结构光和红外光采集的技术,采集到的特征点可以超过30000点。合同中,传统二维人脸识别技术采集的特征点小于1000点。微美全息的三维技术预计也不会受到周围环境的影响,并有望克服传统二维面部识别技术中的许多问题,如光线、姿势、遮挡、动态识别和面部表情等。

业内认为,全息影像通信利用5G网络高速率的特性,传送大数据量的3D视频信号,可为用户展现出更加真实的世界,在交互性上有质的飞跃,或成为互联网社交的颠覆性技术。目前,三星、Facebook等科技巨头均加入该领域技术研发,显示出技术应用前景广阔。目前,国内从事全息投影领域的企业数量也有大幅度的提升,据数据统计,已达到千余家全息投影公司,市场容量也上升到了百亿级别。

在后疫情时代,“云端活动”市场变大,也为媒体、视觉技术商带来新业务。黑科技创新其舞美搭建、视频制作、直播支撑、互动支持和网上展馆等在内的“一揽子”解决方案赋能给了各类活动。

云上活动成为新趋势,将对AR/XR、全息视觉、计算机视觉等技术发展带来利好。

而在这种趋势下,科技巨头已经纷纷入局,当然,晚会、会展也只是整个非接触“云活动”市场的冰山一角。包括云拜年、云喝茶等各种场景的需求,都能引发更多的想象。随着2021年疫情更加稳定,即使人们正常活动恢复,相信许多云活动应用场景和需求会持续发展下去。

企业信息