AR、MR、VR、XR……傻傻分不清楚。
对普通人而言,谈起这些看似大差不差的“R”,可能想到的还是互联网巨头借元宇宙画的饼。很少能有体验这些技术的场景和机会。
但有一家媒体,已经将其中一种增强现实技术(AR)运用到了新闻报道中。今天课代表想要分享的是纽约时报 R&D(Research&Development)团队在 AR 新闻报道中的作品。与大家一同探讨 AR 与可视化叙事结合的可能性,探索这项技术将如何改变人们的阅读体验。
课代表曾在可视化漫游城市中介绍过一个漫步唐人街的项目。这个项目将 4447 张照片转化成曼哈顿唐人街的 3D 模型,读者能够在网页中跟随镜头变化,穿梭于唐人街的前世今生。
更秒的是,这个项目还有一个 AR 版本。唐人街的入口被设计成了一个悬空在真实空间的“任意门”,当你一点点向门里移动的时候,四周的场景变化让你有一种仿佛穿越了的错觉。这满满的沉浸感,课代表第一次体验的时候,真就应了那句“我看不懂,但我大受震撼”。
走着走着,同事们在手机屏幕里消失了!
如此逼真的“既视感”,主要归功于场景还原,也是AR 能提升阅读沉浸感的关键。为了再现 Bethel Gospel Assembly 教堂动人的福音合唱,R&D 在使用摄影测量的基础上,加入了丰富的声光效果。当聚光灯打在屏幕中央,耳旁响起动听的福音合唱时,这座因疫情被迫关闭的教堂仿佛被刻录在了你的手机屏幕前。
AR 在讲故事时的另一个优势,是能够在真实空间里模拟各种视觉效果,起到辅助叙事的作用。比如,为了解释纽约布朗克斯公寓大火中烟雾是如何蔓延的,最好的办法就是让读者在真实环境中感受烟雾的变化。打开摄像头,你能够感受到四周扑面而来的烟雾所带来的窒息感,如同亲历火灾现场。
不仅如此,AR 的沉浸体验与交互故事“搭配食用”,还能起到相辅相成的作用。看这样的故事,不仅有沉浸的体验,还更立体、更有助于理解。
上文说到 AR 擅长在空间中模拟各种视觉效果,在可视化上也是如此。比如,为了展现韦伯望远镜里看到的宇宙,R&D 用粒子可视化模拟出了一片浩瀚的星空。仿佛你只要伸一下手,就能触摸到满天的繁星。
另一种常见于 AR 中的可视化方式是路径模拟。在 Reopening Schools 这个项目中,读者可以手持手机“进入”一个模拟的教室,观察新冠病毒在空气中散布,并随着空气流通不断填满整间教室。在这个场景中,可视化与 AR 相结合,能够使读者对病毒的传播路径模拟有一个更加直观、立体的感受。
在路径可视化的基础上,配合动作捕捉,AR 可视化能解释的东西就更多了。在东京奥运会期间,R&D 的许多 AR 项目都围绕着拆解运动展开。比如介绍体操技巧的 Gymnastics in Tokyo ,AR 可视化可以非常直观地将体操运动员的运动轨迹还原出来。
不仅如此,AR 可视化还能与人脸识别相结合。以解释新冠病毒采样原理的作品 Nasal Swab 为例,这个项目根据人脸识别,在读者面部绘制了一副解剖图。即便读者对医学专有名词一窍不通,只要看着面部的三维解剖图,就能清楚地理解对应的概念。
即便是在 5G 快速发展的当下,AR 新闻也还没有像其他报道形式那样普及。如果这篇文章启发了你对 AR 可视化的探索,那么以下这些问题,可能是你需要知道的。
首先,AR 项目对硬件设备有一定的门槛要求。一些 AR 的可视化交互,需要设备支持光学侦测和定距(LiDAR)等功能。以 iPhone 为例,读者可能需要一台 iPhone12 Pro 以上的设备,才能解锁完整的 AR 体验。
其次,AR 可视化在交互上,并没有人们想象中的简单、便捷。对于网速、交互空间、操作手势,AR 项目都有一定的要求。课代表在体验时,时常因为手机不能正确识别平面而产生一丝劝退的感觉。在这个 loading 多一会儿都不耐烦的时代,AR 交互增加的交互门槛可不是一点半点。
回归到可视化本身,AR 能为可视化带来多少呈现增量,还有更多的探索空间。以讲述森林火灾对气候影响的作品 Wildfire Storms 为例,读者能够透过手机在地面上投放一个模型,用“上帝视角”看山火引发气候灾害的全过程。但相较于视频、交互页面,AR 能提供的信息增量似乎比较有限。在视觉冲击力上,网页端的效果甚至要更胜一筹。
虽然许多 AR 可视化项目还处于探索阶段,但从 R&D 的实践经验来看,AR 与可视化的组合依然有很多发挥的空间。在搭配动捕、摄影测量、人脸设备等其他技术时,AR 可视化能创造出更丰富的玩法。
本期分享就到这里了,如果大家想要近一步体验上面的 AR 项目。后台回复 83 就能一键获得所有项目的链接。
作者| 王羽翔
往期推荐