博物馆逛不完、记不住？扩展现实(XR)技术来帮你！

今天走进一家博物馆&＃xff0c;如果你发现身边的人用手机对着藏品点点戳戳&＃xff0c;又或是戴着VR眼镜上下左右摇头晃脑&＃xff0c;并不是他们走错了片场&＃xff0c;而是正在触摸一个跨越次元的展览世界。

这就是正在被XR技术“重置”的博物馆。

所谓XR&＃xff08;扩展现实&＃xff09;&＃xff0c;就是将虚拟现实&＃xff08;VR&＃xff09;、增强现实&＃xff08;AR&＃xff09;和混合现实(MR)等诸多我们熟悉的视觉交互技术进行融合&＃xff0c;来实现虚拟世界与现实世界之间无缝转换的“沉浸感”体验。

XR技术与博物馆之间的渊源&＃xff0c;要比想象中久远。早在2003年&＃xff0c;VR就曾出现在博物馆的体验语境中。故宫博物院成立文化资产数字研究所&＃xff0c;第一个向公众展示的作品就是VR电影《紫禁城&＃xff1a;天子的宫殿》。不过这个新奇事物真正开始爆发&＃xff0c;还是要从2016年VR/AR技术开始走入大众视野说起。

这场跨越了时间、地域、文化的技术迭代&＃xff0c;究竟是如何发生的&＃xff1f;

自从1916年&＃xff0c;吉尔曼创造了一个词汇——博物馆疲劳&＃xff0c;此后&＃xff0c;参观博物馆时感到身心疲惫的现象&＃xff0c;就引发了无数研究者的关注。可以说&＃xff0c;博物馆的每一次自我变革&＃xff0c;都是围绕着这个核心痛点展开的。

我们知道&＃xff0c;游览博物馆可以很简单&＃xff0c;带上证件&＃xff0c;拨开展柜前的人群&＃xff0c;看&＃xff0c;就好了。但这其中却存在着许多别别扭扭的难言之隐。比如在博物馆游览时&＃xff0c;即使努力地集中精神&＃xff0c;也很容易感到疲惫、无聊&＃xff1b;又或是场馆规模太大&＃xff0c;走到脚底板痛也看不完。走出展馆总会不自觉地化身哲学家&＃xff0c;发出“我是谁我在哪儿”的天问……

如果你有这种感觉&＃xff0c;可能并不是自己缺乏艺术细胞&＃xff0c;或者知识储备不足、觉悟不够高之类的&＃xff0c;很可能只是和大多数人一样&＃xff0c;由于不得不气喘吁吁地穿梭于各个展墙之间&＃xff0c;患上了“博物馆疲劳症”&＃xff08;Museum fatigue&＃xff09;。

为了解决这个问题&＃xff0c;各大博物馆一直在努力&＃xff0c;主要思路总结起来其实就两个&＃xff1a;

一是从类型陈列转向叙事型。从20世纪70 年代以来&＃xff0c;博物馆开始逐渐强调如何与观众沟通&＃xff0c;展陈的叙事性、趣味性、交互性也就变得重要起来了。许多新概念与新方法被引入到博物馆中&＃xff0c;比如语音讲解器。

二是在单位信息密度的基础上不断扩展表现形式。随着行业的发展及展览工程的社会化&＃xff0c;馆方不断追求“艳压”&＃xff0c;场馆规模一个比一个大&＃xff1b;而策展方出于设计审美和市场效益的考虑&＃xff0c;也喜欢搞“拼盘式”的超大规模展览。这种信息密度&＃xff0c;即使是专业观众凝视一件作品的时间也只有短短的17-24秒中。因此&＃xff0c;不断提升单位范围内的信息维度&＃xff0c;减少观众的认知焦虑&＃xff0c;也就至关重要了。

XR如何帮助人们缓解“博物馆疲劳”&＃xff0c;我们已经看到许多博物馆的先进探索。

改造成本最低的方式之一&＃xff0c;就是借助观众手机上的App&＃xff0c;结合增强现实&＃xff08;AR&＃xff09;技术来丰富展览的内容与互动性。

底特律艺术学院2017年的鲁米恩巡回展上&＃xff0c;就用AR在艺术品旁边显示相关信息&＃xff0c;比如对对一具古代木乃伊进行“X光”&＃xff0c;让观众能够看到其外部和内部骨骼等被隐藏起来的信息&＃xff0c;帮助其了解文物许多原本不为人知的细节&＃xff0c;这是传统博物馆很难做到的。

比AR更进一步的&＃xff0c;可以利用VR设备建构出一个虚拟空间&＃xff0c;让观众“身临其境”穿越回过去&＃xff0c;“实地”感受展览所传达的文化风貌。

这项体验可以通过VR设备和内容开发轻松嫁接到原本的陈列基础上&＃xff0c;几乎可以说是大型博物馆的标配了。

观众们既可在故宫博物院中穿越江西景德镇&＃xff0c;感受1.4万平方英尺的瓷漆考古现场&＃xff1b;也可以在大英博物馆借助三星Gear VR梦回青铜时代&＃xff0c;参与祭祀太阳等远古仪式&＃xff1b;还可以跟随考古工作者的脚步&＃xff0c;从博物馆直通妇好墓开掘现场&＃xff0c;了解文物掀开历史尘烟的过程&＃xff1b;亦或是直接进入一副画作之中&＃xff0c;以全新的方式感受画家笔下的风光&＃xff0c;与画中人面对面……

&＃xff08;达利博物馆中&＃xff0c;参观者戴上VR头盔进入达利的绘画中&＃xff09;

当然&＃xff0c;也许被动接受这些知识的灌输还是有些无聊&＃xff0c;那么互动式观展或许会击中自由型观众的心。

将原本只可远观不可亵玩的珍贵文物拿在手里把玩、欣赏&＃xff0c;或许是不少文博爱好者的毕生梦想。而这样的需求正随着VR的出现变得触手可及。将文物以数字化的方式呈现出来&＃xff0c;不存在文物损坏等问题&＃xff0c;而用户也得以从不同视角品鉴藏品。

谷歌的Cultural Institute项目就与伦敦自然历史博物馆合作&＃xff0c;将其收集的30万件标本全部“复活”&＃xff0c;其中就包括第一具被发现的霸王龙化石&＃xff0c;已经灭绝的猛犸象还有独角鲸的头骨等&＃xff0c;观众可以不受玻璃挡板的限制360度地尽情欣赏它。

除了视觉感知之外&＃xff0c;还加上了人体手势、触觉听觉甚至嗅觉等多重感知&＃xff0c;让虚拟展品对用户的输入做出实时响应。比如湖北博物馆就让观众通过VR手柄&＃xff0c;化身战国乐师演奏曾侯乙编钟&＃xff0c;感受中华传统乐器的魅力。

说到这里&＃xff0c;博物馆的自我空间改造已经完成的差不多了&＃xff0c;但对于那些连门都不想出的“肥宅”和特殊群体&＃xff0c;是不是注定与观展无缘了呢&＃xff1f;

为此&＃xff0c;博物馆和科技公司们也是纷纷操碎了心&＃xff0c;虚拟博物馆就此诞生。其中代表性的&＃xff0c;如谷歌名为Arts &Culture&＃xff08;艺术和文化&＃xff09;的App&＃xff0c;搭配VR头戴式显示设备Google Cardboard&＃xff0c;能瞬间将用户送到70个国家的上千座博物馆、美术馆中&＃xff0c;用户只要拥有智能手机和特定类型的VR头盔就可以浏览3D数字仿真品&＃xff0c;获得与线下无二的观展体验。

主动拥抱技术的博物馆&＃xff0c;在实践中难免会遭遇博物馆的“非盈利悖论”&＃xff0c;资金不足、审批流程严格、项目推动缓慢、跨界人才稀缺等&＃xff0c;许多客观因素都会限制博物馆的进程。

即使是在艺术社会化运行体系较为完善的欧美地区&＃xff0c;XR等新技术的引入也需要高质量的外部设备、技术与艺术品的融合等软硬件支撑。可以说&＃xff0c;谷歌、三星等科技企业的参与合作对不少博物馆的探索起到了重要的作用。

可以预见的是&＃xff0c;XR正在以燎原之势席卷整个博物馆界。虽然观众的期待与馆方的规划正在以相同的频率向智慧场馆进发&＃xff0c;但想要依靠新技术讲好文化故事&＃xff0c;并不是一件容易的事。

必须承认的是&＃xff0c;对于观众来说&＃xff0c;展览本身的叙事性比技术更重要。XR是以让文物开口说话、让博物馆连通古今的角色出现的&＃xff0c;同时&＃xff0c;它也带来了新的烦恼。

首先是硬件的制约。“身临其境”的体验需要高精度的内容画面、性能优越的VR硬件以及大数据量的网络传输支持。而许多博物馆连4G网络都难以保证满格的情况下&＃xff0c;用户在体验AR、VR等新技术时不得不长时间等待&＃xff0c;或者与马赛克小人大眼瞪小眼&＃xff0c;在卡帧掉帧中完成观看&＃xff0c;体验自然大打折扣。

目前&＃xff0c;许多博物馆都开启了“5G场馆”的建设&＃xff0c;但这个过程需要网络基础设施、移动终端、内容开发等的全面到位&＃xff0c;不是一朝一夕能够完成的&＃xff0c;期间用户会不会“脱粉回踩”&＃xff0c;还真不好说。

可能会让VR掉粉的除了硬件本身&＃xff0c;还有内容制作上的简单粗暴。前面我们提到&＃xff0c;博物馆引入VR的技术解决方法并不难&＃xff0c;大致就是通过3D建模等技术对展品进行数字化建档&＃xff1b;更深度一点就是在线下进行视觉上的重现&＃xff0c;为全景图片添加指路信息、展品内容等热点&＃xff0c;从而达到展示细节的效果。

但全景图片往往视角比较固定&＃xff0c;在交互时不同图片之间的跳转也会造成明显的断裂感&＃xff0c;还容易还让人空间混乱&＃xff0c;每次点击都需要重新找定位&＃xff0c;体验下来观众很可能一头雾水&＃xff0c;可能会反过来加重“博物馆疲劳症”也说不定。

那么&＃xff0c;面对这种长期乐观、短期艰难的局面&＃xff0c;XR技术未来还能向何处去呢&＃xff1f;

目前来看&＃xff0c;XR技术在博物馆的发展&＃xff0c;正在向两个方向上寻求突破口。

一是利用AI等技术对硬件的呈现能力进行升级。比如通过机器学习算法的优化&＃xff0c;不断降低画面的延迟&＃xff0c;能从一定程度上解决眩晕的问题。LG就与Sogang大学合作&＃xff0c;创建了一种以AI为动力的算法&＃xff0c;可以在VR内容中减少多达5倍的延迟和运动模糊。

同时&＃xff0c;利用AI算法还可以实时将低分辨率视频转换为更高分辨率&＃xff0c;并且能够减少能耗&＃xff0c;这意味着VR的使用成本还有可能进一步降低&＃xff0c;无疑为博物馆落地带来新的想象空间。

除了提升硬件的表现&＃xff0c;AI在内容层面也能帮助博物馆做到更多。

博物馆拥有的大量文物资源都需要经由深度摄像头、3D激光雷达进行数字化重建&＃xff0c;除了需要精细化、无损还原展品信息之外&＃xff0c;如何保证不同配置、不同语言的移动终端都能够稳定、快速地通过AR、VR设备读取出自己所需的内容&＃xff1f;

这就需要利用算法模型来“明察秋毫”了。

比如谷歌就通过分类法训练出了一个识别博物馆画作的机器视觉引擎&＃xff0c;能够从卡纳莱托的《威尼斯大运河从弗兰吉尼宫到圣马尔科拉坎波》中&＃xff0c;精准地识别出“划艇、划艇、贡多拉和绘画”这四个主题。

另一个有意思的AI应用&＃xff0c;则是与知识图谱相结合&＃xff0c;扩展对展品的识别与认知。

绝大多数情况下&＃xff0c;我们只能在某一个具体博物馆中欣赏某项物品&＃xff0c;但通过算法提取展品的关键信息&＃xff0c;便可以找到世界上其他博物馆中的相似展品&＃xff0c;或关联产品&＃xff0c;这就让人们跨越时空限制&＃xff0c;从宏观上了解藏品历史、发展渊源、艺术门类等成为了可能。

而利用VR等设备&＃xff0c;记录和分析线上线下观众对展品的喜好、浏览频次等关键数据&＃xff0c;也为博物馆后续的二次传播、策展、文创IP等衍生服务提供重要的决策支撑。但这一切的前提是AI要能读懂艺术品所表达的内容和情绪等重要信息。

MIT与IBM合作的AI实验室就使用了4.5万幅画作来训练他们的算法模型&＃xff0c;里面包括从文艺复兴早期到当代的艺术肖像画&＃xff0c;进而让机器理解15世纪欧洲风格的艺术肖像画。