博物馆人工智能应用场景建设的尝试与思考——以上海博物馆为例

导读:新技术的出现为博物馆业务发展带来诸多机遇,也对如何应用新技术提出新的挑战。本文以上海博物馆人工智能试点应用场景建设的经验为例,阐明了博物馆应用新技术应该以实际需求为导向,摆正新技术仅是业务辅助的位置,无论新技术如何应用,都应该符合博物馆发展的顶层设计,并要有整体的考量和长远的规划。本文就人工智能在个性化导览中的应用做了深入探讨,多维度数据、互通性系统,以及适用性设备与技术将是个性化导览的三个重要组成部分。人工智能技术的不断成熟与落地应用,加速了工业、医疗、教育、金融、商贸等行业领域的智能化转型,催生了一批以“AI+”为特征的新业态和新模式。人工智能成为社会经济转型发展的重要新动能,以人工智能为核心驱动力的智能经济新阶段已经到来。

2022年11月,美国OpenAI公司发布了一款基于超大规模人工智能模型的人机对话应用程序ChatGPT,能够学习和理解人类输入的文字信息,并根据上下文生成文字内容,回答人类提出的问题,在用户体验和回答问题质量上,远超一般的聊天机器人。2023年3月,该公司发布新作ChatGPT-4,其卓越的新性能和飞快的更新速度再次掀起波澜。

一、人工智能主要技术因素

二、人工智能在国内外博物馆领域应用案例

博物馆作为历史文化的储藏宝库,为民众提供了感受古今、品味千年的平台。随着人工智能在众多行业中的地位越来越突出,这项技术在世界各地的现代博物馆中也逐步得到应用,并在多个方面发挥出重要的作用。在此大背景下,一些具有前瞻性的博物馆已经开始应用人工智能技术进行业务研究和观众服务工作。

美国国家历史博物馆于2017年9月举办“国防创新:人工智能和网络安全挑战”展览,其特色是展示“首个专门设计的人工智能网络防御系统,保护关联性和脆弱性日益增加的设备免受黑客攻击”。在麻省理工学院博物馆举办的“机器人与超越”展览中,麻省理工学院邀请参观者参观该校人工智能实验室,了解麻省理工学院在医学、水下探索、娱乐等方面取得惊人进展的幕后故事。

2018年,国家文物局与百度合作“AI博物馆计划”,通过智能检索、智慧地图、图像识别、语音交互、AI教育等众多产品及技术,在国内多家博物馆分批次落地提升观众参与体验的内容输出。湖南博物院、南越王博物院和武汉自然博物馆等国内多家博物馆引进了AI机器人,可自动完成环境探索,提供导览服务。国家海洋博物馆将人工智能技术引入对外信息发表审核、增强现实大空间搭建等应用场景,其展厅导视大屏也基于AI技术,实现了会员个性化服务、人工智能问答等多样化功能。AI深度学习给博物馆带来了显著的附加价值,不仅可以帮助博物馆梳理识别海量资料,还可以创新传播形式与深度,多维度提升观众体验,前景十分广阔。

上海博物馆曾经在董其昌数字人文项目中,利用博物馆所具有的高清图像数据,引入最新的机器学习技术,借助人工智能分析中国古代绘画的元素及特征,构成素材数据抓取和聚类的自动化模式。采用深度模型卷积网络CNN,通过多层次、不同尺度图像的卷积操作和pooling操作提取深度视觉特征,然后使用softmax进行对象分类。为了实现对象位置的识别,进行对象位置的回归计算。通过算法调优,机器学习基本稳定,初步提取了山、树、房、亭、矾头、船等数十类特征元素上千个,为进一步聚类分析、相似度匹配、特征发现、书画再创作、机器学习策展等应用提供了量化的依据和一定的基础,这也是目前中国书画研究中开创的新手段。

三、上海博物馆人工智能试点应用场景建设

上海博物馆人工智能试点场景结合AI、大数据、物联网等先进技术,以实际需求为牵引,着重围绕场馆的智能管理、游客的智能服务、智能辅助文物修复等方向,开展“4平台+6应用”建设,即物联网能力平台、AI能力平台、大数据平台、BIM+FM平台,6个应用场景包括场馆信息可视化展示、智慧机房管理、在线博物馆、智能导览、智能辅助文物修复和智慧客流分析。总体架构包含基础层、数据层、能力层和应用层(图1)。基础层充分复用集约化建设的信息化基础设施,包括存储设备、网络设备、安全设备、物联网感知设备等,提供统一基础设施支撑;数据层存储有结构化数据和非结构化数据,主要包括票务数据、视频数据、客流量数据、文物藏品数据、物联网感知数据等;能力层包括AI能力平台、大数据能力平台、BIM+FM平台、基础支撑平台等,是对AI技术、大数据技术、BIM等各项先进信息化技术的封装和组合,为上层应用层提供智能化服务能力;应用层包括智能导览系统、预约系统、智慧管理系统等,向博物馆的运营管理人员提供日常运营管理平台。

图1上海博物馆智慧场馆应用建设总体架构图

该试点应用场景主要尝试实现以下几个功能:一是通过可视化的大屏,统一展示智慧运营状态,把整个博物馆的多个业务系统的运营态势、预警状态、未来趋势等集中呈现(图2);二是通过虚拟现实导览丰富观众体验,增强游客的参与感;三是通过智能辅助文物修复,为修复专家提供文物残缺部分图像,提高修复的准确性、可靠性;四是通过智慧客流分析,提升场馆整体营运能力和服务质量。

图2场馆信息可视化展示平台

图3智慧机房监管平台

在线博物馆使用三维虚幻引擎技术构建虚拟博物馆(图4),通过三维建模、UV贴图、法线贴图、虚拟场景构建、实时布料动画、脚本程序设计等手段,实现自动游览和交互漫游,丰富互动体验。

图4在线虚拟博物馆

智能导览结合MR混合现实与AI技术,为游客提供全新的导览体验(图5),体验式导览模式是基于对“物件”的一种引导性的导览方法,由浅入深,以释放观众的想象力和创造力为目的,通过某一“物件”来解读作品和展览。

图5博物馆智能导览

智能辅助文物修复利用数字技术和人工智能技术等辅助文物修复工作,通过AR+SLAM空间定位方式,在不增加额外工作量的情况下,利用数字扫描技术和人工智能辅助文物修复师更快地了解出土文物中各类破片的三维空间位置,并提供直观可视的引导方案,生成数据拟合的猜想文物胚胎,指引修复人员的具体操作,进而提升文物修复的速度和准确率(图6)。

图6智能辅助文物修复

智慧客流分析通过网络实名制预约方便观众提前规划行程,简化线下办票、登记手续,优化入馆体验,同时,分时预约可以有效地分散客流,提升场馆整体运营能力和服务质量(图7)。

图7智慧客流分析

数据收集整理和分析为后续场馆运营提供数据指导,在疫情防控常态化的新要求下,一方面用数字哨兵或场所码抓好疫情防控工作,另一方面用预约方式控制和分散客流,为观众带来舒适的观展体验。

四、经验与启示

上海博物馆智慧场馆场景建设,在2022年10月被评为国家人工智能创新应用先导区“智赋百景”。目前,上海博物馆正在筹建东馆,在人工智能智慧场馆试点建设中,面临的困难、积累的经验、经历的教训、显现的不足,均将在新馆的建设中不断改进和优化,也能为博物馆同行提供借鉴和参考。无论是人工智能技术,还是今后可能出现的其他新技术,对于博物馆业务发展,我们应该思考如下几个问题。

1.敢用新技术、慎用新技术与适用新技术

如今,社会发展迅速,新技术发展迭代日新月异,无论是人工智能、元宇宙还是数字孪生等,既要敢于尝试,又不能过于夸大技术,需要尊重技术创新到成熟应用的客观规律。

上海博物馆2018年建设了国内首个、全面基于数据的博物馆数字化管理平台,为上海博物馆的管理从“经验驱动”到“数据驱动”做出初步尝试和框架结构的建构,也是“智慧上博”建设的一个重要组成部分。然而,管理平台也有其局限性,如采集终端非全覆盖、系统互联尚未完善、数据分析模型欠缺等,但只有大胆尝试,迈出第一步,才能发现诸多的问题和不足,才能在日后的建设中不断优化、提升。

当然,也要慎用、适用新技术。新的技术,在安全、效果、经费、管理等方面会有诸多的不确定性。博物馆使用新的技术,需要做好深入细致的调研,做好各方面的评估和论证,毕竟,博物馆并不是一个需要技术走在最前沿的领域,实用和有助于业务发展才是根本。

2.业务需求为导向与技术辅助为定位

博物馆业务发展一般分为三个方面:内部管理与运营、业务研究与拓展、观众服务与教育。博物馆新技术的应用需要紧密结合这三个方面努力创新和不断提升。新技术的使用要成为长久的、富有意义的应用,笔者认为应该从以下两个方面去考虑:一是能够解决现有的痛点问题;二是能够促进业务工作在精细化方面有所深入、效率方面有所提升、多样性方面有所拓展。

3.顶层设计与长远规划相结合

随着新技术的不断涌现,智慧博物馆的建设日益多元化,各博物馆根据自身条件、环境与能力,选择新技术以及对新技术应用的程度和水平也逐步出现差异。智慧博物馆建设曾明确提出,全面透彻的感知、宽带泛在的互联、智能融合的应用是新型博物馆形态的三大特征。因此,如果新技术在这三个方面能为博物馆的发展带来新的突破和发展,则可以纳入应用范围。

作为博物馆的运营者、管理者,切不能盲目地跟风使用,而是要斟酌新技术应用是否符合业务发展的顶层设计,是否会与已有发展产生矛盾和冲突,是否会引起连锁反应,是否需要多方协作配合等。若要做到新技术的引入助力博物馆健康、稳定、高质量发展,就应该尽早量身打造适合自身发展的新时代智慧博物馆顶层设计,形成能够逐步实现的中长远规划。

我们不能预料将有何种新技术出现,但是当新技术出现后我们能够判断其是否符合博物馆发展规律和要求。此外,我们还应该在已有的感知、互联和融合应用基础上,充分考虑新技术感知何物、怎样互联、能否融合等问题。对于新技术,不能为了使用而使用。

五、人工智能在个性化导览应用的聚焦与展望现有的导览形式已经比较丰富,但基本还是以普适功能为主,个性化导览较为缺乏,不能满足观众的个性化参观需求。个性化导览是体现博物馆服务水平的一个较为重要的因素,人工智能技术的引入有助于个性化导览的开发。上海博物馆人工智能试点场景建设经验表明,多维度数据、互通性系统以及适用性设备与技术将是个性化导览的三个重要组成部分。

1.多维度数据

2.互通性系统

如今博物馆或多或少拥有参观预约系统、藏品信息管理系统、导览系统、客流分析统计系统等,但由于各自业务方向不同,一般情况下参观预约属于开放运营部门,导览属于教育传播部门,客流分析统计属于安全保卫部门,各个系统彼此相互孤立、各自运行。在智慧博物馆建设中,作为博物馆的运营者、管理者,系统性地让现有的技术、现有的业务串联起来,形成合力,促使观众服务更加个性化,并让个性化的服务反馈不断推进博物馆事业高质量发展,是非常有意义的尝试和突破。

3.适用性设备与技术

要使个性化导览的触角尽可能地延伸服务于每一位观众,无论是终端设备还是服务平台,都应该全面考虑。当前,绝大部分观众配有智能手机,将观众个人手机作为终端设备,覆盖的服务对象将最大化,再辅以现场租赁设备,可以将需求对象全覆盖。至于服务平台,分完整内容和轻量内容展示两块,App作为功能全面的平台载体,可为观众提供更为详细、多样化的体验效果,但轻量化的如小程序、H5等平台,更容易被大部分观众接受和使用。

个性化导览将让博物馆服务更加精准、更加智慧、更加专业。

THE END
1.百度取得人脸识别及模型训练相关专利知名企业国家知识产权局百度取得人脸识别及模型训练相关专利 金融界2024年12月7日消息,国家知识产权局信息显示,北京百度网讯科技有限公司取得一项名为“人脸识别及模型训练的方法、装置、设备和存储介质”的专利,授权公告号 CN 112507833 B,申请日期为 2020 年 11 月。 本文源自:金融界https://www.163.com/dy/article/JIQMBITJ0519QIKK.html
2.微博快递100,C位入选百度智能体TOP 100 1 3 6 百度 11-14 11:27 来自 星球视频PC版 和李子柒一起云逛「百科AI非遗馆」啦 @百度百科: OMG!李子柒回来了!这次@李子柒 和@百度百科 共同打造了「百科AI非遗馆」,非遗文化遇上科技buff,瞬间潮翻文化圈!?馆里满满都是惊艳非遗:【文房四宝】优雅爆棚、【茶https://weibo.com/p/1006062525235360
3.来博物馆用AI过大年百度开启第二季博物馆奇遇季活动本次活动,百度AI博物馆联合了包括湖北省博物馆、湖南省博物馆、浙江省博物馆、山西博物院、安徽博物院、四川博物院、天津博物馆、苏州博物馆、金沙遗址博物馆以及上海市历史博物馆共10家国内知名博物馆一起发起。 在2019年春节即将到来之际,百度AI博物馆计划联合国内10家知名博物馆,共同开启第二季的"博物馆奇遇季"活https://item.btime.com/02kr0kpvmkrcb2pv1fmdskh4fn2
4.百度AI博物馆计划多处落地:逛博物馆也能“百度一下”了tech.huanqiu.comzh-Hansarticle百度AI博物馆计划多处落地:逛博物馆也能“百度一下”了国庆长假前,百度联合全国10家知名博物馆共同开启“博物馆奇遇季”/e3pmh164r/e3pmh16qj国庆长假前,百度联合全国10家知名博物馆共同开启“博物馆奇遇季”,除了在这些博物馆展开丰富的落地活动吸引游客以外,百度“AI博物馆计划”也https://m.huanqiu.com/article/9CaKrnKd8YO
5.国家文物局启动AI博物馆计划:让文物“自己开口说话”10%公司在不久的将来,博物馆或将告别人工讲解和机器语音导览的时代——用手机拍一拍,文物就能“自己开口说话”。 5月18日,在国际博物馆日到来之际,国家文物局正式联合启动了“用科技传承文明:AI博物馆计划“,该计划旨在通过百度的AI技术以及产品矩阵,与国家文物局一起构建中华五千年文明智慧网络传播矩阵。 https://www.thepaper.cn/newsDetail_forward_2139068/
6.2023企业社会责任“科技为更好”——百度运用创新技术解决案例:百度博物馆计划焕发文物生机 2022 年,百度迎来了“百度百科博物馆计划”十周年纪念。在 5 月 18 日国际博物馆当天,“百度百科博物馆计划”联合 12 家文博机构开启“数字藏品文博周”。此次活动将 百度 AIGC技术和传统文物相结合,让文物与用户产生了别样的互动和交流。除数字藏品外,“百度百科博物馆计划”已经https://news.cri.cn/20230810/480df5dc-5ec0-aeff-9a94-a643576ee35c.html
7.百度AI:将分隔300多年的《富春山居图》山水合璧以前,艺术家尝试将《富春山居图》画卷合璧,但只在博物馆、艺术展内。现在,通过百度AI,让两岸画卷走出博物馆,在每个人的手机上合璧,拿起AI画笔,实现山水相连,情感相连。 【创意阐述】 【AI互动】我们运用百度AI文心大模型技术,学习原画作的笔触和风格,将不同用户对笔触的想象,都能实时生成多样化的结果,补全画作残缺https://www.digitaling.com/projects/225021.html
8.百度百科博物馆计划获“五个一百”网络正能量专题活动三项大奖极近日,第四届“五个一百”网络正能量精品评选活动最终结果正式公布,百度的“AI复原西南联大”、“非遗百科·点亮非遗”、“纪念珠算申遗成功·中国珠算博物馆”三个项目在2万多件送选作品中脱颖而出,百度也成为获奖最多的互联网企业。 近日,第四届“五个一百”网络正能量精品评选活动最终结果正式公布,百度的“AI复https://www.geekpark.net/news/254193
9.乌镇观察:无AI不科技,应用正渗透生活方方面面中工民生记者注意到,这次不少AI技术打起博物馆的注意,中国电信展示的AR博物馆,用“放大镜”看一个小册子就可到丰富的内容,断头的佛像通过“放大镜”可以看到修复过程;“春分”本来是个抽象的词语,但展示出来确是草长莺飞,栩栩如生。 另外,百度展示的百度百科博物馆,已和近300家博物馆达成合作,收录2万多件藏品。该小程https://www.workercn.cn/32855/201910/23/191023075048753.shtml
10.AI和故宫牵手让国宝开口说话公司产业“AI文化遗产复原计划”启动,年内预计落地10家以上博物馆景区。 技术创新正在成为文化产业繁荣的催化剂。越来越多的互联网公司看到了传统文化的魅力,古老的博物馆也变得越来越年轻,借助科技的力量焕发新生。昨天,中国民营文化商会年会暨第五届中国文化产业峰会在故宫博物院举行,并启动了百度“AI文化遗产复原计划”。百度https://m.chinaxiaokang.com/wap/caijingpindao/gongsichanye/20180126/365573.html
11.智东西早报:胡晓明出任蚂蚁金服总裁全球研发支出1000强出炉11月29日消息,百度与湖南省博物馆正式宣布基于百度“AI博物馆计划”达成战略合作。从今以后,游客在游览湖南省博物馆时,发现带有“AI图像识别”标识的展品,就可以打开百度App里的博识君直接对文物进行拍照识别,目前已经支持该功能的展品超过130件;此外,《马王堆》的10件展品设计了“AR体验”。 https://zhidx.com/p/137476.html
12.天猫双11有589个品牌成交额破亿毛戈平通过IPO备案丨零售电商周报据新华网报道,日前,瑞幸宣布与巴西多方共同开启首个巴西咖啡博物馆。11月8日,巴西出口投资促进局、巴西驻上海总领事馆、巴西精品咖啡协会等多方代表齐聚瑞幸咖啡(江苏)烘焙基地,共同见证中国首个巴西咖啡博物馆揭幕。 8 袁记云饺计划布局北美和东南亚市场 https://www.ebrun.com/20241117/565908.shtml
13.现在的小程序不仅免费还超级实用,省了下载APP的空间!其他可以逛博物馆展品的小程序就更多了,像腾讯出品的国宝全球数字博物馆小程序,可以看到国外三大博物馆的我国文物。我国各个博物馆也大多有自己的小程序,想看哪个直接在小程序里搜就行。 08 解忧小纸条 这个“解忧小纸条”小程序,介绍说是小程序版的解忧杂货店,你可以在这里写上自己的烦恼,或者抽取别人的烦恼小纸https://www.douban.com/note/800363509/
14.2021.06.13新闻早报2、文旅部:中国共产党一大·二大·四大纪念馆被确认为5A景区 3、让法海寺壁画活起来,全国首个国家级数字博物馆将落户石景山 4、2020年民航运输旅客超4亿人次,累计实现营收超6千亿元 5、MSC地中海航运集团进军高奢邮轮市场,推出高奢邮轮品牌Explora Journeys https://maimai.cn/article/detail?fid=1634515557&efid=Y5Y6UdXpXLMV0o4UwEy4Tg
15.AR,AI,虚拟现实,增强现实,人工智能,安防,模拟操作,博物馆数字居有独立开发制作VR虚拟现实、AR增强现实、AI人工智能三维数字化交互、三维线上线下数字化展示交互研发应用的公司。专业的博物馆数字化服务商、数字化互联网与自主化产品研发商。主营业务有:博物馆数字化展示与交互、仿真信息化交互、企事业单位数字化展示与交互、三维影视制作、房地产数字化交互等。 百度关键词 7天http://www.dhrzzl.com/seo/seo/wonder3dvr.com
16.寒假去哪儿?安亭这些科普基地等您来~位于上海安亭的上海汽车博物馆是中国首家专业汽车博物馆,展馆建筑面积2.8万平方米,展区面积逾1万平方米。 博物馆外依景色优美的上海汽车博览公园,内设一楼历史馆、二楼珍藏馆、三楼技术馆以及四楼摩都汽车主题亲子互动空间等区域,近50个品牌的上百辆经典古董车陈列其中,向观众呈现汽车百年发展的若干精彩瞬间。 https://www.shkp.org.cn/content.html?type=lc&id=333084
17.百度AI攻略:地标识别百度ai地标识别百度AI攻略:地标识别 1.需求及方案: 在我以前的一个帖子https://ai.baidu.com/forum/topic/show/943365里面讲了怎么通过图像分割来旅游。 这一次我要说一下怎么通过地标识别+百度百科带大家来看遍/认识天下名胜。 2.平台接入 地标识别接入网址:https://console.bce.baidu.com/ai/#/ai/imagerecognition/overviewhttps://blog.csdn.net/hawkman/article/details/103728678