沉浸式数字叙事中的视听联觉研究与构建——以宋庆龄与中国福利会相关档案开发实践为例

• 作者： 王美贤 ¹ 程宸 ² 陈涛 ¹ 王心雨 ¹ 林纪元 ³
• 作者单位：
  1.  中山大学信息管理学院

  2.  上海音乐学院音乐工程系

  3.  中山大学计算机学院
• 通讯作者： 陈涛 
• 提交时间：2024-05-07

摘要: 在档案资源开发过程中应用沉浸式数字叙事,可使档案记忆立体化、具象化,实现从物理空间向记忆空间的演变。研究对数字人文视域下的档案资源开发利用实践现状进行回顾,分析目前针对档案资源所进行的沉浸式数字叙事构建的局限,论证基于精细声音设计的沉浸式叙事路径在档案资源开发利用中的可行性。并以宋庆龄与中国福利会的相关档案为对象,探索了基于VR、模拟人声、数字人等多种数字技术、强调声音设计的沉浸式叙事方法。当中虚拟展厅与全景色、无损音效的结合,使档案资源从平面延伸到丰满的立体空间,从而验证了音乐和图像多模态交叉交融的可能性,针对文本所进行的视听联觉研究与构建的尝试,拓展了数字人文研究新领域。

Abstract: Immersive digital narrative of archival resources accelerates the three-dimensionalization and concreteness of archival memory, realizing the evolution from physical space to memory space. This study reviews the current status of the development and utilization of archival resources from the perspective of digital humanities, analyzes the limitations of the current construction of immersive digital narratives of archival resources, and demonstrates the feasibility of immersive narrative paths based on sophisticated sound design in the development and utilization of archival resources. Taking the relevant archives of Soong Ching Ling and the China Welfare Institute as an example, we synesthetically construct an audio-visual archival immersive narrative method based on multiple state-of-the-art technologies, such as VR, Meta Human and Mockingbird. It verifies the possibility of multi-modal cross-fertilization of music and image resources. By combining the virtual exhibition hall with panoramic views and lossless sound effects, archival resources and image resources can be extended from a flat space to an infinite three-dimensional space.

• 分类： 信息资源管理 >> 档案学
• 稿件状态： 已在期刊出版
期刊名称： 《数字人文研究》 2024年 第1期
• 引用： PSSXiv:202405.00447 (或此版本 PSSXiv:202405.00447V1)
  DOI:10.12451/202405.00447
  CSTR:32012.36.PSSXiv.202405.00447
• 推荐引用方式： 王美贤,程宸,陈涛,等.沉浸式数字叙事中的视听联觉研究与构建——以宋庆龄与中国福利会相关档案开发实践为例[J].数字人文研究,2024,4(01):74-85. (点此复制)