博物馆人工智能应用场景建设的尝试与思考——以上海博物馆为例

导读:新技术的出现为博物馆业务发展带来诸多机遇,也对如何应用新技术提出新的挑战。本文以上海博物馆人工智能试点应用场景建设的经验为例,阐明了博物馆应用新技术应该以实际需求为导向,摆正新技术仅是业务辅助的位置,无论新技术如何应用,都应该符合博物馆发展的顶层设计,并要有整体的考量和长远的规划。本文就人工智能在个性化导览中的应用做了深入探讨,多维度数据、互通性系统,以及适用性设备与技术将是个性化导览的三个重要组成部分。人工智能技术的不断成熟与落地应用,加速了工业、医疗、教育、金融、商贸等行业领域的智能化转型,催生了一批以“AI+”为特征的新业态和新模式。人工智能成为社会经济转型发展的重要新动能,以人工智能为核心驱动力的智能经济新阶段已经到来。

2022年11月,美国OpenAI公司发布了一款基于超大规模人工智能模型的人机对话应用程序ChatGPT,能够学习和理解人类输入的文字信息,并根据上下文生成文字内容,回答人类提出的问题,在用户体验和回答问题质量上,远超一般的聊天机器人。2023年3月,该公司发布新作ChatGPT-4,其卓越的新性能和飞快的更新速度再次掀起波澜。

一、人工智能主要技术因素

二、人工智能在国内外博物馆领域应用案例

博物馆作为历史文化的储藏宝库,为民众提供了感受古今、品味千年的平台。随着人工智能在众多行业中的地位越来越突出,这项技术在世界各地的现代博物馆中也逐步得到应用,并在多个方面发挥出重要的作用。在此大背景下,一些具有前瞻性的博物馆已经开始应用人工智能技术进行业务研究和观众服务工作。

美国国家历史博物馆于2017年9月举办“国防创新:人工智能和网络安全挑战”展览,其特色是展示“首个专门设计的人工智能网络防御系统,保护关联性和脆弱性日益增加的设备免受黑客攻击”。在麻省理工学院博物馆举办的“机器人与超越”展览中,麻省理工学院邀请参观者参观该校人工智能实验室,了解麻省理工学院在医学、水下探索、娱乐等方面取得惊人进展的幕后故事。

2018年,国家文物局与百度合作“AI博物馆计划”,通过智能检索、智慧地图、图像识别、语音交互、AI教育等众多产品及技术,在国内多家博物馆分批次落地提升观众参与体验的内容输出。湖南博物院、南越王博物院和武汉自然博物馆等国内多家博物馆引进了AI机器人,可自动完成环境探索,提供导览服务。国家海洋博物馆将人工智能技术引入对外信息发表审核、增强现实大空间搭建等应用场景,其展厅导视大屏也基于AI技术,实现了会员个性化服务、人工智能问答等多样化功能。AI深度学习给博物馆带来了显著的附加价值,不仅可以帮助博物馆梳理识别海量资料,还可以创新传播形式与深度,多维度提升观众体验,前景十分广阔。

上海博物馆曾经在董其昌数字人文项目中,利用博物馆所具有的高清图像数据,引入最新的机器学习技术,借助人工智能分析中国古代绘画的元素及特征,构成素材数据抓取和聚类的自动化模式。采用深度模型卷积网络CNN,通过多层次、不同尺度图像的卷积操作和pooling操作提取深度视觉特征,然后使用softmax进行对象分类。为了实现对象位置的识别,进行对象位置的回归计算。通过算法调优,机器学习基本稳定,初步提取了山、树、房、亭、矾头、船等数十类特征元素上千个,为进一步聚类分析、相似度匹配、特征发现、书画再创作、机器学习策展等应用提供了量化的依据和一定的基础,这也是目前中国书画研究中开创的新手段。

三、上海博物馆人工智能试点应用场景建设

上海博物馆人工智能试点场景结合AI、大数据、物联网等先进技术,以实际需求为牵引,着重围绕场馆的智能管理、游客的智能服务、智能辅助文物修复等方向,开展“4平台+6应用”建设,即物联网能力平台、AI能力平台、大数据平台、BIM+FM平台,6个应用场景包括场馆信息可视化展示、智慧机房管理、在线博物馆、智能导览、智能辅助文物修复和智慧客流分析。总体架构包含基础层、数据层、能力层和应用层(图1)。基础层充分复用集约化建设的信息化基础设施,包括存储设备、网络设备、安全设备、物联网感知设备等,提供统一基础设施支撑;数据层存储有结构化数据和非结构化数据,主要包括票务数据、视频数据、客流量数据、文物藏品数据、物联网感知数据等;能力层包括AI能力平台、大数据能力平台、BIM+FM平台、基础支撑平台等,是对AI技术、大数据技术、BIM等各项先进信息化技术的封装和组合,为上层应用层提供智能化服务能力;应用层包括智能导览系统、预约系统、智慧管理系统等,向博物馆的运营管理人员提供日常运营管理平台。

图1上海博物馆智慧场馆应用建设总体架构图

该试点应用场景主要尝试实现以下几个功能:一是通过可视化的大屏,统一展示智慧运营状态,把整个博物馆的多个业务系统的运营态势、预警状态、未来趋势等集中呈现(图2);二是通过虚拟现实导览丰富观众体验,增强游客的参与感;三是通过智能辅助文物修复,为修复专家提供文物残缺部分图像,提高修复的准确性、可靠性;四是通过智慧客流分析,提升场馆整体营运能力和服务质量。

图2场馆信息可视化展示平台

图3智慧机房监管平台

在线博物馆使用三维虚幻引擎技术构建虚拟博物馆(图4),通过三维建模、UV贴图、法线贴图、虚拟场景构建、实时布料动画、脚本程序设计等手段,实现自动游览和交互漫游,丰富互动体验。

图4在线虚拟博物馆

智能导览结合MR混合现实与AI技术,为游客提供全新的导览体验(图5),体验式导览模式是基于对“物件”的一种引导性的导览方法,由浅入深,以释放观众的想象力和创造力为目的,通过某一“物件”来解读作品和展览。

图5博物馆智能导览

智能辅助文物修复利用数字技术和人工智能技术等辅助文物修复工作,通过AR+SLAM空间定位方式,在不增加额外工作量的情况下,利用数字扫描技术和人工智能辅助文物修复师更快地了解出土文物中各类破片的三维空间位置,并提供直观可视的引导方案,生成数据拟合的猜想文物胚胎,指引修复人员的具体操作,进而提升文物修复的速度和准确率(图6)。

图6智能辅助文物修复

智慧客流分析通过网络实名制预约方便观众提前规划行程,简化线下办票、登记手续,优化入馆体验,同时,分时预约可以有效地分散客流,提升场馆整体运营能力和服务质量(图7)。

图7智慧客流分析

数据收集整理和分析为后续场馆运营提供数据指导,在疫情防控常态化的新要求下,一方面用数字哨兵或场所码抓好疫情防控工作,另一方面用预约方式控制和分散客流,为观众带来舒适的观展体验。

四、经验与启示

上海博物馆智慧场馆场景建设,在2022年10月被评为国家人工智能创新应用先导区“智赋百景”。目前,上海博物馆正在筹建东馆,在人工智能智慧场馆试点建设中,面临的困难、积累的经验、经历的教训、显现的不足,均将在新馆的建设中不断改进和优化,也能为博物馆同行提供借鉴和参考。无论是人工智能技术,还是今后可能出现的其他新技术,对于博物馆业务发展,我们应该思考如下几个问题。

1.敢用新技术、慎用新技术与适用新技术

如今,社会发展迅速,新技术发展迭代日新月异,无论是人工智能、元宇宙还是数字孪生等,既要敢于尝试,又不能过于夸大技术,需要尊重技术创新到成熟应用的客观规律。

上海博物馆2018年建设了国内首个、全面基于数据的博物馆数字化管理平台,为上海博物馆的管理从“经验驱动”到“数据驱动”做出初步尝试和框架结构的建构,也是“智慧上博”建设的一个重要组成部分。然而,管理平台也有其局限性,如采集终端非全覆盖、系统互联尚未完善、数据分析模型欠缺等,但只有大胆尝试,迈出第一步,才能发现诸多的问题和不足,才能在日后的建设中不断优化、提升。

当然,也要慎用、适用新技术。新的技术,在安全、效果、经费、管理等方面会有诸多的不确定性。博物馆使用新的技术,需要做好深入细致的调研,做好各方面的评估和论证,毕竟,博物馆并不是一个需要技术走在最前沿的领域,实用和有助于业务发展才是根本。

2.业务需求为导向与技术辅助为定位

博物馆业务发展一般分为三个方面:内部管理与运营、业务研究与拓展、观众服务与教育。博物馆新技术的应用需要紧密结合这三个方面努力创新和不断提升。新技术的使用要成为长久的、富有意义的应用,笔者认为应该从以下两个方面去考虑:一是能够解决现有的痛点问题;二是能够促进业务工作在精细化方面有所深入、效率方面有所提升、多样性方面有所拓展。

3.顶层设计与长远规划相结合

随着新技术的不断涌现,智慧博物馆的建设日益多元化,各博物馆根据自身条件、环境与能力,选择新技术以及对新技术应用的程度和水平也逐步出现差异。智慧博物馆建设曾明确提出,全面透彻的感知、宽带泛在的互联、智能融合的应用是新型博物馆形态的三大特征。因此,如果新技术在这三个方面能为博物馆的发展带来新的突破和发展,则可以纳入应用范围。

作为博物馆的运营者、管理者,切不能盲目地跟风使用,而是要斟酌新技术应用是否符合业务发展的顶层设计,是否会与已有发展产生矛盾和冲突,是否会引起连锁反应,是否需要多方协作配合等。若要做到新技术的引入助力博物馆健康、稳定、高质量发展,就应该尽早量身打造适合自身发展的新时代智慧博物馆顶层设计,形成能够逐步实现的中长远规划。

我们不能预料将有何种新技术出现,但是当新技术出现后我们能够判断其是否符合博物馆发展规律和要求。此外,我们还应该在已有的感知、互联和融合应用基础上,充分考虑新技术感知何物、怎样互联、能否融合等问题。对于新技术,不能为了使用而使用。

五、人工智能在个性化导览应用的聚焦与展望现有的导览形式已经比较丰富,但基本还是以普适功能为主,个性化导览较为缺乏,不能满足观众的个性化参观需求。个性化导览是体现博物馆服务水平的一个较为重要的因素,人工智能技术的引入有助于个性化导览的开发。上海博物馆人工智能试点场景建设经验表明,多维度数据、互通性系统以及适用性设备与技术将是个性化导览的三个重要组成部分。

1.多维度数据

2.互通性系统

如今博物馆或多或少拥有参观预约系统、藏品信息管理系统、导览系统、客流分析统计系统等,但由于各自业务方向不同,一般情况下参观预约属于开放运营部门,导览属于教育传播部门,客流分析统计属于安全保卫部门,各个系统彼此相互孤立、各自运行。在智慧博物馆建设中,作为博物馆的运营者、管理者,系统性地让现有的技术、现有的业务串联起来,形成合力,促使观众服务更加个性化,并让个性化的服务反馈不断推进博物馆事业高质量发展,是非常有意义的尝试和突破。

3.适用性设备与技术

要使个性化导览的触角尽可能地延伸服务于每一位观众,无论是终端设备还是服务平台,都应该全面考虑。当前,绝大部分观众配有智能手机,将观众个人手机作为终端设备,覆盖的服务对象将最大化,再辅以现场租赁设备,可以将需求对象全覆盖。至于服务平台,分完整内容和轻量内容展示两块,App作为功能全面的平台载体,可为观众提供更为详细、多样化的体验效果,但轻量化的如小程序、H5等平台,更容易被大部分观众接受和使用。

个性化导览将让博物馆服务更加精准、更加智慧、更加专业。

THE END
1.AR导游导览是什么?解析景区/博物馆提高游客体验的黑科技AR导游导览是利用增强现实(AR)技术为用户提供导览和展示功能的应用,通过将虚拟对象、图像、文字或其他交互元素叠加到用户的视野中,为其提供更丰富的信息和导航指引。用户可以使用智能手机、平板电脑或其他AR设备观看虚拟内容,并与之互动。以下是对AR导游导览的详细介绍,以及如何通过AR技术赋能景区、博物馆以提高游客参观https://www.bilibili.com/read/cv40149618
2.AR技术在博物馆展呈中的应用2.1AR在博物馆中应用的案例介绍 随着AR技术的成熟,在一些国外的博物馆中已经开始应用此技术。2014年,GoogleGlass10与一家制作AR内容的公司开展合作,他们的口号是“代替传统的语音导览”。与传统的语音导览服务相比,基于AR技术的GoogleGlass穿戴设备的优点显而易见,它实现语音操控,只要说一声“开始导航”,便可开始进行https://www.depthlink.com/news_221
3.元宇宙数实融合应用平台支持多端应用支持文旅/博物馆等行业方案定混空AR眼镜ROKID ar Studio搭载元宇宙数实融合应用平台支持多端应用支持文旅/博物馆等行业方案定制 混空系统+硬件设备*1【基础套装】图片、价格、品牌样样齐全!【京东正品行货,全国配送,心动不如行动,立即购买享受更多优惠哦!】https://item.jd.com/10099432133017.html
4.网络中心该部分规定了职业教育中使用的三类数字资源的要求,包括课堂与实训室数字化教学资源(媒体素材、试题、试卷、课件、案例、文献资料、网络课程、教学工具软件APP、常见问题解答和资源目录索引等)、仿真实训资源(仿真实验软件、仿真实训软件和仿真实习软件等)、数字场馆资源(职业体验馆、数字博物馆、数字艺术馆、数字科技馆、http://www.xtzy.com/wlzx/detail.jsp?public_id=153330
5.成都金沙遗址博物馆ar产品介绍再现金沙AR 简称:成都金沙遗址博物馆ar 产品分类:应用 领域:其它 描述:成都金沙遗址博物馆欢迎您! 企业基本信息 统一社会信用代码91120116792509496W企业名称天津恒达文博科技股份有限公司 公司类型股份有限公司法定代表人韩国民 注册资本9071万人民币成立日期2006-08-18 https://www.tianyancha.com/product/5ce097d239574e2083bb15a0f9f1d329
6.AR展厅:创新的虚拟展览体验这种创新的AR展厅不仅为游客提供了视觉上的享受,还让他们能够与历史互动,感受到传统文化蕴藏的独特魅力。 2.东京博物馆:AR展厅为游客挚献沉浸体验场景 东京国立博物馆(Tokyo National Museum)在推出名为”Tokyo National Museum AR”的AR应用程序后,为参观者带来了一种独特而全新的参观体验。通过这款应用程序,游客https://www.kivicube.com/blog/?p=13019
7.亭,智能语音导览屏,AR太极,智慧物联网设备应用行业: 智慧校园 ,智慧景区 ,智慧医院 , 智慧公园 ,智慧社区 智能步道 标准款 应用行业: 智慧校园 ,智慧景区 ,智慧医院 , 智慧公园 ,智慧博物馆 ,智慧社区 智能竞速单车互动 应用行业: 智慧校园 ,智慧景区 , 智慧公园 ,智慧博物馆 ,智慧社区 http://www.fractalai.cn/
8.AR,VR博物馆和全息博物馆的应用实例现实中,智能化展览全息博物馆藏文物众多,多数不可能长期展出,聚象科技的“全息数字化博物馆作为国家引导开拓发展的新的信息化发展方向,就能有效地将实体博物馆数字资源进行归类、整合与实时更新,并借助AR增强现实和VR虚拟现实等实体虚拟化技术尽可能的让视觉呈现效果更加好,VR/AR博物馆以及全息博物馆新颖的陈列展示方式https://xaybyh.com/news/newsinfo/1.html
9.这十款iOS11应用带你入门AR增强现实技术–Mac玩儿法这款算是最早的一款 AR 应用之一了,用户只需拿着 iPad 或 iPhone 将摄像头对准测量物体,比如墙壁或门框,MeasureKit 的轨道模式可以自动追踪物体,连续绘制和测量物体的轨迹。MeasureKit 可以测量角度、人的高度、建立立方体模型、绘制曲线。 家酿电脑博物馆 https://www.waerfa.com/ios-11-ar-apps?ref=pricetag
10.互动多媒体多媒体应用设备互动多媒体是一种基于高新视觉技术而诞生的新型展示系统,结合时下最新的虚拟现实(VR)技术、全息成像技术、增强现实技术(AR)等数字技术及多元化显像设备,普遍应用于博物馆、企业馆、科技馆、产品发布等多种展示场合。http://www.gzdecor.com/service/dmtyy/
11.挑战传统体验的AR技术正在为观展增强现实趣味只需通过智能手机和平板电脑内下载该定制的应用程序,观众就可以使用他们设备的摄像头来解锁Alex Mayhew对历史艺术作品的现代演绎。 加拿大安大略省美术馆展览REBLINK图片来源:AGO(视频截图) 根据博物馆规划顾问、AGO首席解说规划师Shiralee Hudson Hill的说法,此次展览中,超过八成参观者表示使用AR应用程序让他们更沉浸于https://www.cls.cn/detail/950655
12.CloudXR业务平台,深入嘲赋能应用XR协同方案可实现XR内容提交、分发、场景同步等协作能力;支持多人协同共同完成复杂场景的操作和演练;远程专家可以实现对整体设计的操作和监控。可应用于产品设计、设备安装等多种应用场景。 AR景点秀/AR博物馆 -痛点:旅游景点/博物馆蕴藏的历史、人文等丰富的信息,大多数游客只能走马观花,无法对景点/文物有更深入的https://www.zte.com.cn/china/about/magazine/zte-technologies/2019/10-cn/3/3.html
13.用AR打造一场澎湃动人的博物馆空间AR设备和AR技术的发展和应用将推动智慧文旅进一步发展,让个性化、定制化产品和差异化活动遍地开花,为观众提供更多新体验,促进行业的可持续发展,将科技与文化更深地结合在一起。 AR产品如何解决目前博物馆场景体验的痛点? 01 在虚拟空间内实现创意设计,减少空间迭代成本 https://www.d-arts.cn/article/article_info/key/MTIwNjY5OTY1NjOEqYFmr6ykcw.html
14.2022年度陕西省重点研发计划项目申报指南目录6.1 公共文化空间关键共性技术研发与应用示范 6.2 传统文化元素创意转化关键技术研发与应用示范 6.3 面向增强现实博物馆的虚实融合显示与智能交互关 键技术及应用示范 6.4 虚拟数字人技术与融媒体结合研究与应用示范 6.5 新基建背景下的非遗传播及传承关键技术研发与应用示范 http://www.kt180.com/html/sxs/9889.html
15.AR技术邂逅中华历史文明,焕发博物馆文化新活力AR数字探寻龟兹文化之美 近日,中国近现代新闻出版博物馆携手 SUMG·新华文创,推出了“AR 数字探寻龟兹文化之美”数字导览体验,引领观众跨越时空界限,深度领略千年石窟艺术的非凡魅力。 博物馆对数字复原石窟进行了全面的导览升级,引入AR 手机应用与 AR 眼镜 XR 交互技术,无缝融合现实与虚拟两个世界。观众在佩戴设备后https://www.urbanlight.cn/newsdetail/0ac67a24-e03e-1968-dfaf-ab96ee4b5c57
16.智慧博物馆数字化解决方案传统博物馆面临的问题以及数字化技术的应用,促使博物馆数字化改造成为文旅行业的趋势。数字化改造不仅可以解决博物馆自身的问题,同时也能够满足现代游客对文化旅游的多元化需求,提高文旅行业的竞争力。 数字文旅技术沉淀 VR、AR、MR技术应用 3D引擎技术应用 AI技术应用 http://jjfa.gdghwl.com/
17.北京文物科研快速发展博物馆信息化应用多元——北京科技赋能博物随着科技的快速发展,博物馆作为展示历史文化的重要场所,正逐渐融入科技元素,实现数字化、智能化转型。近期北京市统计局开展了科技赋能博物馆建设情况专题调研,调研结果显示: 文物科研和藏品保管数字化快速发展,科技手段应用多元。在文物科研和藏品保管收藏工作中,四成以上的调研单位应用了藏品保管环境监测系统,对藏品保存的https://tjj.beijing.gov.cn/tjsj_31433/sjjd_31444/202407/t20240729_3762078.html
18.展厅AR体感互动Ar体感互动是以体感互动系统和3d融合技术、结合软硬件和七全七美智能科技自主设计开发三维数字内容,让来展厅参观的人员发生肢体变化的时候,现实窗口里面画面也会跟随人体进行变化,AR体感互动根据里面制作的内容不同,可以运用在禁毒教育基地、消防安全馆、企业展厅、博物馆等展厅展馆中。 https://www.cqdashuju.com/chanping/chanpinginfo/69.html