上证报中国证券网讯(记者 杨翔菲)传统文化IP如何在AI时代绽放新的光彩?沉浸式演艺会为观众带来怎样更具有科技感的体验?6月12日首演的《太虚幻境》给出了答案。
“有没有一种技术,既可以让观众获得现场艺术的体验感,又能展现虚实结合的魅力——这是我们考虑的问题。”《太虚幻境》总导演、制作人钟卓在接受上海证券报记者采访时,这样介绍这部全球首创MR沉浸式戏剧的初心。
业内人士认为,《太虚幻境》以《红楼梦》为根基,首次将MR及4D高斯技术结合,超大数据和超时长的应用于创作一部戏剧,用佩戴Apple Vision Pro作为增强AI体验的交互终端,彻底打破物理舞台与数字影像的边界,标志着沉浸式演艺进入虚实共生的新阶段。
技术赋能 用传统IP书写新故事
《太虚幻境》的故事发生在20世纪40年代的红楼戏班。戏班通过献演《红楼梦》,换取五张决定生死的“公民证”,戏至高潮,倒计时归零,“公民证”从未存在,一切生死离合只是默认执行的程序代码。
观众以系统中唯一未被清除的“幻影”身份入场,全程佩戴Apple Vision Pro,在400多平方米的影视级舞美实景空间中自由穿行。
“最大的难度在于技术。”钟卓表示,该项目从立项到首演耗时整整14个月,大半年的时间都在解决技术和艺术如何完美融合呈现的问题。
首先是4D高斯动态三维重建。制作团队首先在专业影棚内部署了150台矩阵工业相机,从多个角度同步捕捉真人演员的表演细节。通过AI算法,让这些数据被实时重建为可360度自由探索的数字分身。
有了数字分身,体积视频技术将它们无缝嵌入真实的剧场空间。观众可伸手触碰悬空的判词字符,会看到字符如水波般消散;虚拟演员从场景一侧走来,其前世也会如真人般在一个平行空间里出现,甚至可以互动。
而Apple Vision Pro则是能看到这些动态的载体和交互引擎。头显内置的空间定位与手势识别系统,能够以毫秒级延迟追踪观众的位置、视线与手部动作。观众在某处场景停留稍久,隐藏剧情便会自动触发;观众可以自行选择跟随某一位角色自由且近距离的解锁他的故事线和命运。
也就是说,《太虚幻境》带来的体验,并非依赖某一项单一技术,而是一套从采集到算力,从读写代码到输入指令交互的完整技术链条。这也是4D高斯及MR技术在全球范围内首次完整结合落地在一部时长为60分钟的商业剧目。
虚实结合 开创文化科技融合新范式
整部剧最大的挑战在于每一位舞蹈演员要精准地把握他完全看不见的4D高斯内容(角色)的位置,展现人物情绪和混合舞蹈动作。
由于虚拟角色和特效是在后期通过对4D高斯采集素材的读写、编程转换成头显设备可读取的数据格式,观众可以通过头显上的摄像头看到布景和特效,很容易代入到混合现实空间。而现场的演员则是完全看不到后期制作及渲染氛围,凭记忆力和舞蹈功底精准把握走位、情绪与节奏。
该剧监制姜雪芬告诉记者,技术团队根据头显设备的参数和性能,突破Apple系统未开源的技术壁垒,在编舞、剧本、MR视觉特效、音乐创作、舞台设计上做了大量的优化和适配工作,实现了头显设备和物理空间的精准定位。演员和4D高斯内容的精准定位,3D特效内容和舞蹈的精准定位,让三条平行线实现意想不到的交集效果。
“我们最难的点就是让观众在同一时空看到演员的前世今生、爱恨情仇,并参与到他们的时空故事线中,交互、感知、纠缠而无任何出戏的感觉。这就需要从最开始的项目定位、内容创编上去做科学的顶层设计和技术高度。”姜雪芬说。
业内人士认为,《太虚幻境》的诞生,标志着沉浸式演艺从技术叠加迈入技术共生的新阶段。它不是对传统戏剧的数字化修补,而是一次从内容生产到观演关系的系统性重构。当数字角色与真人演员被置于同一叙事维度,当观众的每一次选择都成为剧情变量,一种全新的虚实共生演艺形态就此成型。
在姜雪芬看来,沉浸式演艺多年来经历了VR、AR、MR技术的迭代,MR、XR以及4D Gaussian Splatting剧场级商业应用将会赋能更多的演艺内容和文旅新空间。真实的场景搭建、浓烈的情感张力、精彩的叙事结构、文化与科技的融合,国际视野的审美力都将为观众带来传统镜框式舞台及空间所不具备的独特体验。
“我们的独立创投(885413)和制作《太虚幻境》是一种探索,好的内容创编能力才是核心价值,AI终将不能替代人类真实情感,但它具备增强艺术多元化层次、让文化遗产活化的功能。”姜雪芬表示,希望未来有更多更好的设备和技术匹配优秀的内容。
“随着科技发展,观众对现场体验的需求会越来越强烈。”在钟卓看来,未来,现场娱乐将成为更多观众的选择,同时,观众对剧目的品质、内涵、艺术审美要求也会越来越高。对于演艺工作者来说,利用技术手段讲述更美好的故事,将是沉浸式演艺未来发展的方向。
《太虚幻境》由上海世臣文化科技集团有限公司出品,保利尚悦湾(上海)剧院管理有限公司联合出品,上海世臣发展有限公司、太虚幻境文化科技(上海)有限公司制作。6月12日起,该剧在上海保利剧院1862时尚艺术中心保利剧院·一号舱开启年度驻演。
