西电团队研发文旅大模型:既能做文物修复,又能提供定制化旅行攻略
创始人
2025-12-12 00:01:10
0

央广网西安12月11日消息(记者苏睿楠 通讯员王格)点击上传一张左下角缺损的永乐宫《朝元图》壁画中诸神持笏朝拜的局部图,仅大约5秒钟后,系统就可将缺损处修补完好,肉眼难以看出补全痕迹。这便是西安电子科技大学人工智能学院焦李成教授团队研发的“丝路逸旅:文旅资源修复与生成基础模型”。

生成式大模型知识引导壁画补全流程示意图(央广网发 西安电子科技大学供图)

对于毫无历史、考古等专业背景的团队来说,在没有高质量原图参考的情况下,如何将壁画修补正确且具有历史性、艺术性,是面临的第一个难题。

要想修补得好,首先就得对壁画有正确的“诊断”。

为解决传统病害勘察依赖人工、效率低且诊断难的痛点,“丝路逸旅”模型搭载了端到端“壁画病害检测与分析”方案,从壁画病害的检测、分析到修复方案的生成,全过程都可实现无人工干预的自动化智能处理。

高效壁画病害检测示例图(央广网发 西安电子科技大学供图)

当把有所残缺的《唐惠妃武氏墓山水屏风》和《韩休墓山水图》电子版依次上传到系统中,便可一键生成图文并茂的文物“体检报告”。在这份“报告”中可以很清晰地看到系统用蓝色、紫色、白色和黑色在原图中标注出的代表剥落、褪色、霉斑、裂缝等病害,对相应区域给出壁画病害类别定义、病害程度分析,并提出“霉斑去除”“补充线条”等对策,甚至可给出使用何种矿物颜料进行填补的精细化建议。团队成员、博士二年级的高子涵熟练地进行着演示,“这个方案以视觉分割网络和多模态基础模型为内核,能够实现对裂缝、剥落等病害区域的像素级精准识别,并通过知识检索增强技术关联考古文献,给出分析和应对建议,不仅为数字化修复开出‘药方’,还能为现实中的壁画修补提供一定的辅助”。

基于这样一份全面的“体检报告”,系统不仅能对因病害而导致的褪色、模糊等问题进行修复,还可对缺损的部分进行补全。

壁画修复整体流程示意图(央广网发 西安电子科技大学供图)

“我们国家的历史朝代多,且有的朝代历时长,不同时期的壁画、器物等都具有不同的历史特征,所以我们前期花费了大量的时间用于数据和信息的收集,整个过程需要反复验证,以保证修复后的准确度”,团队成员、博士二年级的王子韬介绍道,“对于壁画文物中无法考证的缺失部分,我们和华清宫文保中心联合提出了基于生成式大模型知识引导的壁画补全方法”。生成式大模型就像一位善于学习的优秀学生,可以广泛涉猎、准确理解学习到的历史文献和考古资料,并把所学到的内容进行结构化梳理,应用到模型对壁画的修补过程中,从而确保补全内容在艺术风格、器物形制等方面均符合历史事实与审美规范。

在进行壁画“查-修-补”的过程中,团队成员开始越来越多地了解陕西历史文化,也开始思考如何能让游客拥有更好的文旅体验。

结合Deepseek文化领域理解与生成大模型的旅游规划示例图(央广网发 西安电子科技大学供图)

“请帮助我搜集信息给出完整的旅游规划,我想在西安安排三天的旅游行程,我患有三高,同时有两个孩子,我又想在西安这个碳水之城尽可能的玩得痛快,我应该如何安排我们的饮食呢?并且通过协调的路径规划安排适当又不累,同时孩子也可以接受的城市Ciywalk,然后让文化体验、科技体验都拉满。”在输入这样的需求后,“丝路逸旅”大模型不仅会从行程总览、饮食建议、行程特色、交通建议、注意事项等方面生成一份定制的旅行攻略,“我们相比于其他大模型会更精准一些,因为我们是跟当地文旅部门合作的,获取到的信息更加全面准确”,团队成员、博士二年级的张洁解释道,“除了可以用文字提问,也可以上传照片,我们的模型都可以为大家进行多语种的解答”。

以琼浆为例的模型流程示意图(央广网发 西安电子科技大学供图)

上传一张黑神话悟空游戏中的琼浆道具的图片,模型即可通过图片检索,发现其类似来通杯,指出在陕西历史博物馆中有相似展品“镶金兽首玛瑙杯”,定位出其珍藏于博物馆负一层四号并给出路径规划建议,还可对来通杯的历史来源进行问答和讲解。

这一模型将“人找信息”变为“信息找人”,为游客提供高质量的定制化伴随化的智能服务,“经过与陕旅集团深度合作,我们面向游客需求,不断地更新模型,不仅可以为游客旅行前和旅行中提供攻略、文博知识讲解,还与西安市汉服文化协会、陕西国博政通信息科技有限公司联合打造AI古风换装、AI盲盒设计等服务”,团队指导老师刘旭介绍道。

古画换装与3D生成示意图(央广网发 西安电子科技大学供图)

基于团队在智能感知与影像解译方面30余年的积累,“丝路逸旅”模型的研发不仅有着扎实的技术支撑,还汇集了文化遗产保护专家、旅游规划专家等提供文博专业领域知识支持,经过2年多持续的调研、分析、研发、优化,这一模型从最初的构想终于落地应用。

未来,团队将立足陕西深厚的历史文化底蕴与丰富的旅游资源,面向文化传承与智慧文旅需求开展系统研究。依托人工智能、大数据与多模态感知等技术,围绕历史文化遗产数字化保护、文旅资源智能推荐、沉浸式交互体验等方向展开创新探索。通过将科技创新与文化内涵深度融合,不断拓展与更多地方文旅部门的合作,用“西电方案”助力智能化文物修复,助力陕西打造具有国际影响力的智慧文旅示范高地,推动优秀历史文化的创新传播与可持续发展。

相关内容

热门资讯

内塔尼亚胡称只要其在任以军就不... △内塔尼亚胡(资料图)当地时间24日,以色列总理内塔尼亚胡在以色列地方政府联合会上发表讲话,谈及以军...
瑞士谈判核心诉求为何?议长会否... 美伊瑞士谈判刚刚结束,双方对谅解备忘录各执一词。我在伊朗外交部新闻发布会现场提问:从瑞士谈判到阿曼磋...
鲁比奥:美伊本月底将继续技术磋... △鲁比奥(资料图)24日多方消息显示,美国国务卿鲁比奥表示,美国和伊朗技术团队将于6月底在瑞士继续举...
芯联集成200亿项目落地:12... 快科技6月24日消息,芯联集成近日发布对外投资进展公告,公司与芯联先进集成电路制造(绍兴)有限公司(...
刷新海洋机器人融资纪录后,他以... 来源:滚动播报 (来源:上观新闻) 依托长三角科创产业沃土,国内海洋智能装备赛道跑出新锐力量。今天...
2026年省管企业“科技创新与... 为进一步提升国资国企科技创新管理水平,推动企业规范开展科技创新活动,强化实践运用能力,切实以高质量创...
智平方郭彦东:机器人大脑不应只... “下一代机器人大脑不应只是算力和数据的竞赛。” 6月23日,具身智能机器人公司智平方创始人兼CEO郭...
在上海图书馆,翻开5G-A与一... 今年以来,我们能切身感受到AI正在全面加速,融入身边的工作与生活。全面养虾、AI视频席卷网络、一人公...
原创 诺... 最近科技圈的热闹,一半是苹果折叠屏的消息闹的,另一半,则是那个几乎被我们遗忘的名字——诺基亚。就在大...
苹果首款折叠iPhone屏幕供... 来源:环球网 【环球网科技综合报道】6月24日消息,据Wccftech报道,市场供应链相关信息显示,...