“灵境石语”系列游戏-“雪泥鸿爪”

“灵境石语”项目是为了配合上海图书馆东馆美术文献馆的线下碑帖展览，而推出的系列沉浸式VR交互游戏，由上海戏剧学院创意学院副院长铁钟带领团队开发。该项目采用严肃游戏的模式，将文献研究的成果，有机融入到游戏场景之中，让观众在互动体验中，了解文献背后的故事。甫一推出，即受到学界，业界的关注，并获得2022年中国数字人文年会优秀项目最佳互动奖。
2023年8月，制作团队再度推出“灵境石语”之“雪泥鸿爪”全新游戏。与第一期主要通过场景演绎的方式不同，“雪泥鸿爪”不再进行单一作品的解读，而是以苏轼的生平游踪为线索，让观众在现代与古典、虚拟与现实相融合的游戏场景中，感悟苏轼交织着山水漫游与艺术历程的人生旅途，领略山水与书法、自然与文化间的互为成就。最大程度上消除观众与文物间的距离感，不知不觉中，观景人也成了画中人。

随着技术发展、成本降低，文化IP向数字转化的速度正在加快。被谈论多年的“元宇宙”，在上海已经开始落地成为可消费的内容。与纯商业项目相比，“雪泥鸿爪”更注重于文化内涵的挖掘与实验性技术的探索。此次开发过程中，来自上海戏剧学院（上海市虚拟环境下的文艺创作重点实验室）的团队尝试运用AIGC技术中的人工智能图像生成技术，探索人工智能协作艺术创作的可能性。

团队使用自然语言的处理技术，将围绕每个场景的主题文字通过AI 系统（ Chat GPT-3.5），描述为可感的文字关键词。进而向AI绘图系统提供提示和布局实现对图像内容的自动生成。根据不同软件的特性，前期主要采用midjourney完成草图绘制。后期，则采用stable diffusion加关键词引导的方式，旨在获得更稳定可控的创作效果。团队以一千多张图片为训练数据，广泛尝试Dreambooth、LORA和Hypernetworks等不同的训练方式，训练出效果最佳的专属风格模型，激发国风山水的多样想象。

“灵境石语”系列一期的作品，大多在现实场景或前人画作的基础上进行二度创作。“雪泥鸿爪”则广泛参考AI生成的画面，采用虚幻引擎进行数字创作以及场景的搭建与深化。最终呈现出，即有工笔山水的细节，又有发光粒子等科技元素加持的全新国风场景，极具视觉冲击力，展示出了数字创意产业在技术创新方面的巨大潜力。

除此之外，项目还采用OptiTrack Motive系统对真人进行三维空间的数据记录提取，通过虚拟引擎将摄像机跟踪数据与VR场景、动捕数据与虚拟形象组合、渲染。实现了数字虚拟人与VR场景深度融合，带领观众感受充满未来感的视听新体验，也实现对虚拟现实游戏的拓展和模式的革新。

观众因而得以在现代科技的引领下，与苏轼一同经历仕途起落的高山低谷。从西湖春和景明的惬意山水，到汴京黑暗中的沉寂，从黄州料峭春风里的迷雾，到灿烂星河下的壮阔山河。最终，在岭南静看日光破晓，飞鸟醒动。人们得以真真切切的感受到“让收藏在博物馆里的文物，陈列在广阔大地上的遗产，书写在古籍里的文字都活起来”。

————来源：MANA-全球新媒体艺术平台-艺术/设计/科技跨界创新