近日,由国家文物局指导、敦煌研究院与腾讯公司联合打造的“数字藏经洞”正式上线,成为全球首个运用游戏科技打造的新一代“超时空参与式博物馆”。
产品上线首周,就有超1400万人次进入“云游敦煌”小程序,超40万人在云游戏中进行深度体验,单用户最长体验时间更长达2.68小时。
不同于传统博物馆里的互动项目,“数字藏经洞”在通过数字照扫、三维建模技术,高精度重现敦煌藏经洞的同时,更在“玩法”层面,为数字文化项目提出了更多新思路。
当工笔画风格的美术手法与游戏化思维的交互形式相融合,“数字藏经洞”带来了4K影视级别的画面效果与沉浸式互动体验,用户只需登录“云游敦煌”小程序,便可投身到一场富有沉浸感的跨时空之旅。
现代工笔画描绘拉近历史,更将古迹遗址 “完整”还原
想要利用科技手段跨越时空带领用户透过屏幕进入历史的河流,虚拟场景氛围感的打造至关重要。
为此,考虑到用户置身于现代场景中与历史连接的特殊关系,“数字藏经洞”并没有采取美术制作领域常见的“3D渲染2D”仿古风格,而是选择了类国画的现代工笔画画风 ,这种最早可追溯到唐代的绘画风格,线条勾勒明确,描绘手法干脆利落,适合表现文物细节,在保留历史元素的基础上,也以更具时代感、更近现代的方式,拉近了历史与现代的距离。
而在还原敦煌场景的过程中,制作团队还遇到了许多因历史原因导致实景缺失带来的困难,为了顺利推动项目进行,“数字藏经洞”在美术环节参考了大量敦煌研究院的专家建议及文献资料。
例如在还原现实中早已不复存在的莫高窟附近的古建筑——三界寺时,三界寺准确的布局和建筑样式均已很难求证,当时关于三界寺的布局更出了很多方案,最后则是根据一个残卷上的描述,在“数字藏经洞”中对三界寺的布局进行了大体准确的还原。
除此之外,古迹的建筑样式也是场景还原的一大难点,例如在还原三界寺土塔时,塔的制式和具体构建参考资料较少,美术团队最终听取了敦煌专家研究院建筑学专家孙毅华的建议,参考了莫高窟残存下来的慈氏塔,花塔样式;塔刹、悬铎、浮塑、彩绘束莲等细节,参考了肖默先生的著作《敦煌建筑研究》;而塔身浮塑的样式,则参考了慈氏塔的天王像造型,多方资料结合参考下,最终以接近史实的形态,将三界寺土塔呈现在了“数字藏经洞”之中。
多类型NPC强化沉浸体验,角色动画管线工具为制作提效
当然,“数字藏经洞”带来的这场时空之旅也不是一场简单的“单人旅程”,NPC角色的加入,让“数字藏经洞”的体验者并不“孤单”,而使NPC在场景中如真人演绎一般动作流畅、栩栩如生的背后,制作团队在创意策划层面运用游戏化思维和相关技术进行了大量工作。
这其中,一类NPC基于敦煌研究院给出的历史故事剧本,脱胎于真实的历史角色,并基于史实完成形象、台词和动作设计,本身就作为历史资料的一部分帮助体验者去理解敦煌文化;而另一类NPC则是便于用户交互、传递故事信息的虚构角色,穿插于虚拟的敦煌场景之中,让“数字藏经洞”的旅程更加生动、鲜活。
在“数字藏经洞”的过场动画部分,为了呈现符合玩家直觉并有趣的故事演绎,NPC角色均需要对应的台词分镜和动作设计,总共8个NPC和6个玩家化身的角色都需要配置剧情表演和常规动画,带来了庞大的工作量。
为优化项目推进的效率,制作团队选择借助腾讯动捕基地 和腾讯游戏CROS的Superman角色动画管线工具来提效,让整体的制作过程不仅有了专业的动捕设施可以使用,高效的管线工具也提供了面部表情绑定快速搭建及语音驱动的AI口型动画生成能力,配合项目组内同事的倾情演出,在剧情动画,尤其是多角色剧情互动场景中,获得了不错的产出效果。
为加快角色配音及制作表情动画的工期,制作团队选择先在引擎中搭建故事流程,制作和录制分镜,提前给到动捕现场进行方案预研和跑通工作。并对对话音频进行评估,在制作表情动画时剔除了NPC决策背对及侧身姿态下表情动画不可见的内容,结合Superman角色动画管线工具中AI语音驱动生成表情动画功能,优化了整体制作效率。
相较于传统动画技术,此次“数字藏经洞”使用的AI语音动画能够更加准确地还原人脸表情的细节和变化,实现语音和面部动画的自然融合。基于深度学习技术wav2vec2+tranformer网络结构,利用预训练好的wav2vec2模型在有效提取语音表征的同时,还使用transformer网络更好的学习序列的上下文关系,做到精准的动画表情配合。
而正是由于采用了自动化技术,制作团队实现了在极短的时间内完成大量的面部动画制作,在一周时间便达成了“数字藏经洞”中NPC表情动画及关联配音从无到有的任务目标。
此外,在更直观交互的“玩法”层面,为了实现面向全年龄段的上手体验,“数字藏经洞”借鉴了游戏的操作模式和互动特性,使体验者可以通过选择来源于莫高窟壁画中晚唐人物形象的不同服饰,生成6个用户角色,以RPG角色扮演形式及轮盘式操作模式,做到与NPC对话、领取任务、达成守护文物成就等操作,沉浸式体验到文物流传相关的故事。
并且,通过游戏化的背包、地图、手记等交互设置及自由探索等成就模式,在3d文物展厅中还可近距离了解21件超高清海内外文物详情、收集28个敦煌知识点,在不同场景感受来自琵琶、筚篥、鼓等敦煌传统乐器演奏的BGM,以趣味、简单的形式,就能了解敦煌藏经洞的学术知识。
云游戏技术加持 ,实现“零”门槛云游敦煌
显然,“数字藏经洞”的制作团队付出了大量努力让敦煌藏经洞以“高还原”、“高沉浸”的全新体验形态,展现在了现代人的眼前,那么,为了让这一成果能够触达更多的用户,降低体验门槛也势在必行。
为了让用户可以随时随地体验“数字藏经洞”的独特魅力,制作团队将手机视为用户进入“数字藏经洞”的主要硬件设备入口,而微信小程序成为了开启敦煌之旅的“虚拟钥匙”,云游戏方式自然成为了承载项目运行的又一基石。
借助在服务器端进行的渲染和编码,云游戏技术使程序在触达用户之前,在云端就完成了超36GB的庞大数字资产存储与运算 ,而这一容量已和目前主流3A游戏体积相当。
但对于用户而言,体验“数字藏经洞”,却仅需通过手机端小程序一键接入,如同现代人随时随地都可以打开手机刷短视频获得资讯一样,轻松“直达”敦煌遗址,突破设备、时空和人流限制,有效降低了体验门槛 。
结语
如同传统博物馆里的一件件文物藏品值得被世人研究观赏,数字文化项目也是在以另一种形式,将文物古迹带入现代人的生活,用游戏科技推动文化遗产数字化进入新发展阶段。
”数字藏经洞“此次对敦煌遗址的还原复现,让敦煌遗址基于手机端、通过云游戏的方式”活“了起来,而作为项目背后的制作团队,腾讯游戏CROS团队将数字还原科技与美术策划创意,以及时下更易被用户接受的创新玩法相结合,帮助敦煌文化解锁了被更多人知晓和了解的新途径。
可以微信搜索“云游敦煌”小程序一键进入数字藏经洞,感受这场超时空穿越之旅带来的震撼与美感。也可以在电脑上登录“数字敦煌”体验PC版本,获得不同的感受。