教学孵化|AI赋能沉浸式XR昆曲《游园・惊梦》:当六百年雅韵邂逅数字新生

时间:2026-01-13浏览:10设置


    2025 12 30 日至 31 日,由张敬平教授悉心指导,2023 级数字艺术设计专业艺术硕士刘可欣、欧阳波联袂创作的毕业作品 ——AI 赋能沉浸式 XR 昆曲《游园惊梦》,于数字演艺集成创新文化和旅游部重点实验室成功展演。


这部深度融合传统昆曲雅韵与XRAI 前沿科技的沉浸式艺术作品,以虚实交织的叙事空间、耳目一新的交互体验,为现场高校相关领域专家及我校师生呈现了一场别开生面的视听盛宴,收获了广泛赞誉。观众于光影流转的虚实交融间,解码昆曲传承的千年密码,领略非遗文化的当代魅力。


202617日,该作品举行专场观摩活动,我校多位校领导及相关职能部门负责人亲临现场。领导们充分肯定了作品的创新理念与艺术表现,赞扬创作团队的匠心与付出,并围绕内容深化、技术优化与应用前景等方面提出了宝贵建议,为作品的后续完善与发展指明了方向。


谢巍书记在体验作品

黄昌勇院长在体验作品

胡敏副书记在体验作品

徐咏副书记在体验作品

刘庆副院长在体验作品

聂伟副院长在体验作品

郭恺副院长在体验作品

谢巍书记与创作团队交流并提出宝贵建议

黄昌勇院长与创作团队交流并提出宝贵建议


Part 1创作灵感

  创作灵感源于对非遗 “活态传承” 的深度思考。看到昆曲等传统戏曲类非遗多剧院演出,年轻群体鲜少去剧院看戏曲,而数字技术正为文化传播开辟新路径,便萌生了 “科技转译经典” 的想法。结合全国两会上 “AI 赋能非遗” 的热议方向,以及专项课题:国家社会科学基金项目“公众参与文化遗产保护机制与路径研究”。团队决定聚焦昆曲经典《牡丹亭》的当代转译,以XR 技术构建虚实交融的戏曲叙事空间,打破传统戏剧文创仅聚焦视觉元素的局限,将唱腔韵律、表演身段等核心魅力通过XR 技术转化为可交互体验,让观众从 “旁观者” 变为 “参与者”,真正实现传统艺术与当代生活的连接。约30 分钟的探索时间里,观众将跨越时空,从汤显祖家的厅堂到人头攒动的茶楼、戏园,从名角儿拜码头的天蟾到北大燕园,从江南园林到最美昌林,场景的流变正是昆曲发展百年的生动缩影。


Part 2
创作过程

  创作以 “守正创新” 为原则,历经三阶段推进。前期在张敬平教授指导下,团队深耕《牡丹亭》文本与昆曲发展史,走访戏曲专家梳理关键场景与文化符号,构建 “时空漫游” 叙事框架。中期尝试高斯泼溅技术的各种数据采集方式,并且与主机串流结合,找到流畅运行的方案。后期依托数字演艺实验室平台,反复测试场景切换与交互逻辑。


Part 3
技术实现

  作品构建了 “AI+VR” 全链路技术开发体系。借助元宇宙内容生产基座,通过AIGC 技术快速生成五个时空场景的3D 资产以及数字人从设计稿到动起来。效率较传统方式提升3倍以上。数字人 “春香” 采用数智NPC技术与自然语言处理技术,可根据观众提问追溯昆曲术语渊源,实现 “可对话” 交互。XR 设备通过空间定位技术,让观众在物理空间中行走时,同步触发虚拟场景的视角转换与内容解锁。听觉韵律与视觉场景深度联动,打造多感官沉浸体验。


Part 4
未来展望

  未来将从技术迭代与场景拓展、知识考古多角度发力。技术层面计划进一步加强空间定位,为数字人的坐标追踪以及动作优化提供保障,同时优化各场景历史还原的准确性。更重要的是如何将真人演员和虚拟演员的联动通过更巧妙的方式关联到一起,并探索在商业综合体落地轻量化体验区,让作品走出实验室。更长远目标是构建开放内容平台,吸纳更多非遗项目入驻,打造集传承、体验、共创于一体的数字文化生态,助力非遗走向更广阔的舞台。



              视频拍摄及剪辑|邵奕凡 王晨 潘俊朴

              文  案|刘可欣 欧阳波

              图  片|刘可欣

              审  核|  唐芳 张敬平


Copyright © CCS of STA.All rights reserved. 沪ICP备09077319号-8
返回原图
/