![]()
![]()
日前,字节跳动旗下豆包与上海浦东美术馆达成合作,成为该馆两项国际大展——“图案的奇迹:卢浮宫印度、伊朗与奥斯曼的艺术杰作”与“非常毕加索:保罗•史密斯的新视角”的官方AI讲解员。这是AI产品首次成为美术馆的官方讲解工具,AI讲解员是否称职?它的互动导览是否可以媲美真人讲解员?这套“黑科技”是否可以在其他美术馆、博物馆复制推广?浦东美术馆×豆包这一创举,引发各界关心。
![]()
豆包带你逛浦美
展厅内可以看到,观众通过豆包App的“视频通话”功能或拍照提问方式,获取针对具体展品的专业讲解,即使轻声提问,豆包也能准确识别。同时,豆包还提供通用和亲子两种解说风格。双方通过独家数据合作和定向搜索优化,进一步提升了豆包识别和讲解的准确性。据了解,训练豆包熟悉一个展览,定向优化的全程需要2—4周,这些知识需要人工投喂,并不断矫正。AI讲解员还非常敬业——只要连得上信号,那就不限场地,不限作品,有问必答,永远不会喊累。
观众通过豆包视频通话来了解展品
在观展过程中,用户可以让豆包从艺术风格、历史背景、创作技法与文化意义等多个维度,对作品进行解读。例如,当观众在“非常毕加索”展厅面对毕加索的《阅读》时,可以向豆包提问“画面中宁静的氛围是如何营造的”。豆包会结合画作创作于1932年的特定背景,分析其中柔和曲线与鲜明色块如何共同塑造出私密而宁静的阅读场景,阐述这一时期毕加索以其缪斯玛丽·特蕾莎·沃尔特为灵感的创作风格特征,如何在具象与变形之间取得平衡。
![]()
浦东美术馆展厅
项目负责人介绍,视频讲解功能基于Seed1.8模型的视频理解能力。目前Seed1.8在视频感知、流式、视频理解方面都达到了先进水平——它不再局限于“拍图、发送、提问,再拍图、再提问”的模式,而是能持续理解观众眼前不断变化的视角和场景,从而实现连续、自然、像人一样的对话交互。
这位豆包AI导览,已经不是过去的由人工灌入的固定“语音包”,按它目前的“智商”,可以根据观众的提问,进行针对性的智能回复,语音语调体贴,高情商地照顾到“艺术小白”的情绪。在社群媒体上,记者看到了已经有用户晒出了新奇的体验。在毕加索的牛头雕像前,网友打开了“视频通话”,并且使用上海话提问,豆包同样用上海话来回应观众,为她解疑释惑,语音语调和真人相似,毫不违和。网友“茜茜和老徐”说,豆包AI甚至还会主动挑起话题互动,当在“图案的奇迹”展厅,镜头扫描到一把壶,豆包会让观众猜猜,这壶上面镶嵌的是什么宝石?在带蕾丝屏风前,它会提醒观众观察地面上的地毯花纹。这些参观细节,本容易被忽略。
![]()
浦东美术馆展厅
浦东美术馆董事长李旻坤表示,此次浦东美术馆与豆包的跨界合作让观众可以借助AI与艺术家隔空对话、解锁展览背后的故事,实现艺术的“千人千面”,美育资源也将突破时空限制,“我们希望AI解说能够成为连接观众与国际艺术瑰宝之间的智慧纽带,希望豆包让看展更美好。”
![]()
浦东美术馆和豆包联合举办新闻发布会
字节跳动副总裁朱骏表示,AI和用户的交互本质上是一种对话体验。在观展过程中,希望豆包通过共情式的提问和启发式的对话,把用户已有的感受和经验调动出来,形成更有参与感的理解。
![]()
伊朗15世纪《牡丹纹盘》
![]()
明代永乐年间(1403-1424年在位)青花牡丹纹盘
豆包逛展项目负责人表示:“在博物馆场景中运用AI讲解,最大的挑战是保证内容的准确性。模型不仅要能区分外观高度相似的文物、理解小众且缺乏公开资料的展品,还要能在观众移动观展、从不同角度和距离观察同一件展品时,始终保持稳定识别。”她举例说明:“比如这次展览中有一件伊朗15世纪的《牡丹纹盘》,其风格与明代永乐年间的青花牡丹纹盘非常接近,这就要求模型必须从细节入手进行精准区分。”
![]()
浦东美术馆展厅
此次豆包与浦东美术馆的合作,标志着AI技术在专业艺术普及领域的进一步落地。通过提供可交互、可拓展、个性化的导览服务,AI产品将为观众带来兼具深度与趣味的观展新体验,推动艺术文化传播与互动体验融合。
原标题:《豆包出任浦东美术馆官方AI讲解员》
栏目编辑:江妍 图片来源:豆包|乐梦融摄
来源:作者:乐梦融
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.