XR 技术驱动下的非遗仿真数据服务方案探索

图书馆杂志 ›› 2023, Vol. 42 ›› Issue (384): 88-96.

XR 技术驱动下的非遗仿真数据服务方案探索

李川1, 2 朱学芳1 冯秋燕1（1 南京大学信息管理学院 2 安徽财经大学管理科学与工程学院）

出版日期:2023-04-15 发布日期:2023-04-27
作者简介:李川南京大学信息管理学院，博士研究生；安徽财经大学管理科学与工程学院，助教。研究方向：多媒体信息处理、数字人文。作者贡献：确定研究框架、分析实验数据、撰写论文初稿。E-mail: lichuan_nuaa@126.com 江苏南京 210023 朱学芳南京大学信息管理学院，教授。研究方向：数字信息资源管理及服务、多媒体信息处理、信息可视化、数字人文、模式识别与人工智能等。作者贡献：规划研究命题、设计整体思路、评阅修改全文。江苏南京 210023 冯秋燕南京大学信息管理学院，博士研究生。研究方向：机器学习、信息管理。作者贡献：收集数据、修改论文。江苏南京 210023

A Scheme Exploration of Simulation Data Service Driven by XR for Intangible Cultural Heritage

Li Chuan1, 2, Zhu Xuefang1, Feng Qiuyan1(1 School of Information Management, Nanjing University; 2 School of Management Science and Engineering,Anhui University of Finance and Economics)

Online:2023-04-15 Published:2023-04-27
About author:Li Chuan1, 2, Zhu Xuefang1, Feng Qiuyan1(1 School of Information Management, Nanjing University; 2 School of Management Science and Engineering,Anhui University of Finance and Economics)

摘要/Abstract

摘要：

随着XR（VR、AR、MR）技术的快速发展，非遗项目保护和传承工作对沉浸感、交互性、多元信息感知有了更高的服务要求。实现物理空间与虚拟空间的交互和融合，有助于提升非遗项目信息的组织效率、展示质量、传播效率和服务黏性。通过分析XR 技术的交互特性和应用现状，讨论XR 技术对数字人文研究的参考意义，研究基于数字孪生架构的非遗数据服务策略，探索XR 技术场域下的非遗项目保护与推广方案，以华佗五禽戏为例分析XR 技术如何应用于非遗项目服务。运用KINECT+Unity3D 平台组合来模拟运维非遗项目，验证XR 技术场域下保护和推广非物质文化遗产的可行性和优越性；提出一种综合应用智能技术的非遗项目运维方案，为数字人文技术探索提出建议。

Abstract:

With the development of XR (VR, AR, MR) technology, the protection and promotionof intangible cultural heritage have higher service requirements. These requirements are distributed atimmersion, interactivity and multi-information perception. The interaction and integration of physicaland virtual space will help intangible cultural information to improve the organization efficiency,display quality, communication efficiency and service stickiness. The research analyzes the interactivecharacteristics and application status of XR technology first. The reference of XR to digital humanitiesis discussed. Then the strategy of data service for intangible cultural heritage based on digital twinarchitecture is studied. Finally the research explores the protection and promotion scheme for intangiblecultural heritage driven by XR. Taking the Five-Animal Exercise as an example, it analyzes how XR isapplied to intangible cultural services. The research uses the combination of Kinect & Unity3D platformto simulate projects. The feasibility and superiority of protecting and popularizing intangible culturalheritage driven by XR have been verified. The research puts forward a scheme for intangible culturalheritage project with comprehensive technology application in order to put forward suggestions for thetechnology exploration of digital humanities.

李川朱学芳冯秋燕（南京大学信息管理学院安徽财经大学管理科学与工程学院）. XR 技术驱动下的非遗仿真数据服务方案探索[J]. 图书馆杂志, 2023, 42(384): 88-96.

Li Chuan, Zhu Xuefang, Feng Qiuyan( School of Information Management, Nanjing University, School of Management Science and Engineering, Anhui University of Finance and Economics).

A Scheme Exploration of Simulation Data Service Driven by XR for Intangible Cultural Heritage [J]. Libraly Journal, 2023, 42(384): 88-96.

参考文献

[ 1 ] UNESCO. The lists of intangible cultural heritageand the register of good safeguarding practices[EB/OL].（ 2021-02-03）[2021-08-10]. https://ich.unesco.org/en/lists．
[ 2 ] 中国艺术研究院. 中国非物质文化遗产名录[EB/OL].（2021-07-08）[2021-08-10]. http://www.ihchina.cn．
[ 3 ] 人民网. 习近平与中国文化遗产保护[EB/ OL].（2020-05-19） [2021-09-02]. http://politics.people.com.cn/n1/2020/0519/c1001-31713953.html.
[ 4 ] L Prasuethsut. HTC Vive： Everything you needto know about the SteamVR headset[J]. RetrievedJanuary，2016（3）：17—20.
[ 5 ] ITU. IMT Vision-Framework and overall objectivesof the future development of IMT for 2020 andbeyond [EB/OL]. （2015-09-15）[2021-05-14].https://www.itu.int/rec/R-REC-M.2083/en.
[ 6 ] 赵宇翔，练靖雯. 数字人文视域下文化遗产众包研究综述[J]. 数据分析与知识发现，2021，5（1）：36—55.
[ 7 ] Tao F，Zhang M. Digital Twin Shop-Floor：A New Shop-Floor Paradigm Towards SmartManufacturing[J]. IEEE Access，2017，5（99）：20418—20427.
[ 8 ] 张茂军. 虚拟现实系统[M]. 北京：科学出版社，2001.
[ 9 ] R T Azuma. A Survey of Augmented RealityPresence[J].Teleoperators and Virtual Environments，1997（2）：355—385.
[10] Jules Moloney. Digital Cityscapes：MergingDigital and Urban Playspaces [J]. Second Nature：International of Creative Media，2009（2）：200—203.
[11] P Milgram，A F Kishino.Taxonomy of MixedReality Visual Displays [J]. IEICE Transactions onInformation and Systems，1994（9）：1321—1329.
[12] 陈玉. 传感器在智能手机上的应用[J]. 电子制作，2014（22）：31—32.
[13] 石婷婷，徐建华，张雨浓. 数字孪生技术驱动下的智慧图书馆应用场景与体系架构设计[J]. 情报理论与实践，2021，44（3）：149—156.
[14] S Ke，F Xiang，Z Zhang，et al. A enhancedinteraction framework based on VR，AR and MRin digital twin [J]. Procedia CIRP，2019，83：753—758.
[15] Elisa N，Luca F，Marco M. A review of theroles of digital twin in CPS-based production [J].Procedia Manufacturing，2017（11）：939—948.
[16] M Iqbal，M S J Hashmi. Design and analysis ofa virtual factory layout [J]. Journal of MaterialsProcessing Technology，2001，118（1）：403—410.
[17] Sang Su，Choi Bo Hyun，Kim Sang，et al. Adiagnosis and evaluation method for strategic planning and systematic design of a virtualfactory in smart manufacturing systems [J].International Journal of Precision Engineering andManufacturing，2015，16（6）：1107—1115.
[18] Oyekan J O，Windo H，Ashutosh T，et al. Theeffectiveness of virtual environments in developingcollaborative strategies between industrial robotsand humans[J]. Robotics and Computer-IntegratedManufacturing，2019（55）：41—54.
[19] Jain S，Shao G，Shin S J. Manufacturing dataanalytics using a virtual factory representation [J].International Journal of Production Research，2017，55（18）：5450—5464.
[20] Al-Ahmari A M，Abidi M H，Ahmad A，et al.Development of a virtual manufacturing assemblysimulation system [J]. Advances in MechanicalEngineering，2016，3（8）：67—78.
[21] Bailin L，Yaxiong B，Qiang H，et al. A lowcomplexitymethod for authoring an interactivev i r t u a l m a i n t e n a n c e t r a i n i n g s y s t e m o fhydroelectric generating equipment [J]. Computersin Industry，2018（100）：159—172.
[22] Arwen Hutt，Jenn Riley. Semantics and syntax ofdublin core usage in open archives initiative dataproviders of cultural heritage materials [J]. Digitallibraries，2005（10）：262—270.
[23] Aspasia Dania，Dimitrios Hatziharistos，MariaKoutsouba，et al. The use of technology inmovement and dance education： Recent practicesand future perspectives [J]. Procedia-Social andBehavioral Sciences，2011（15）：3355—3361.
[24] Athanasios D Styliadis，Lazaros A. Sechidis.Photography-based fa?ade recovery & 3-d modeling：A CAD application in Cultural Heritage [J]. Journalof Cultural Heritage，2010，12（8）：77—91.
[25] Marcello Carrozzino，Alessandra Scucces，Rosario Leonardi，et al. Virtually preserving theintangible heritage of artistic handicraft[J]. Journalof Cultural Heritage，2010，12（1）：82—87.
[26] 郭颖. 基于动作捕捉技术的陕北安塞腰鼓交互式教学系统研究[D]. 西安：西安理工大学，2020.[27] Taiki Yabumoto，Fumiaki Yoshida，HideakiMiyauchi. Marmo Detector： A novel 3D automatedsystem for the quantitative assessment of marmosetbehavior [J]. Journal of Neuroscience Methods，2019（322）：23—33.
[28] 王展，王慧琴，吴萌，等. 数字图像修复技术在文物领域的应用展望[J]. 文博，2012（3）：79—82.
[29] 周亚，许鑫. 非物质文化遗产数字化研究述评[J].图书情报工作，2017，61（2）：6—15.
[30] 李思琪. 历史档案资源的数字化开发：数字敦煌项目的启示[J]. 山东档案，2020（4）：6—9.
[31] 孙晓霞. 中国2010 年上海世博会新材料亮点集萃（四） [J]. 新材料产业，2010（12）：64—68.
[32] 孙博文，张佳梁，蔡亚飞，等. 基于Kinect 体感交互的多人在线虚拟实验系统[J]. 计算机科学，2016，43（9）：284—288.
[33] 彭斌，祝志恒，阳军生. 基于全景展开图像的隧道衬砌渗漏水数字化识别方法研究[J]. 现代隧道技术，2019，56（3）：31—37.
[34] 薛可，龙靖宜. 中国非物质文化遗产数字传播的新挑战和新对策[J]. 文化遗产，2020（1）：140—146.
[35] 徐浩天，王言伟，耿欢，等. 一种基于体感交互设备的虚拟沙盘展示技术[J]. 飞机设计，2020，40（4）：45—48.
[36] 范家玮，魏中华. VR 虚拟现实场景眼动交互信号动态预测方法研究[J]. 自动化与仪器仪表，2021（4）：3—7.
[37] Kostick Kristin，Zuk Peter，Lázaro Mu?ozGabriel. Operationalizing Agency in BrainComputer Interface（ BCI） Research [J]. AJOBNeuroscience，2021，12（5）：203—205.
[38] 吴溢华，王政军. 以“知识流”为核心的高校图书馆业务整合及虚拟业务组构建研究[J]. 中国科技资源导刊，2021，53（2）：64—71.
[39] 陈涛，刘炜，孙逊，等. IIIF 与AI 作用下的文化遗产应用研究新模态[J]. 中国图书馆学报，2021，47（2）：67—78.
[40] 秦晓珠，张兴旺. 数字孪生技术在物质文化遗产数字化建设中的应用[J]. 情报资料工作，2018，39（2）：103—111.
[41] 马跃，王春晓，尹震宇，等. 依托中科院SAMP平台的数字孪生实验室模型设计与构建[J]. 小型微型计算机系统，2019，40（11）：2343—2347.
[42] 肖飞，张为华，王东辉，等. 数字孪生驱动的固体发动机总体设计体系架构与应用[J]. 计算机集成制造系统，2019，25（6）：1405—1418.
[43] 牟茜茜，吕晓华. 动作捕捉专利技术综述[J]. 中国科技信息，2018（18）：25—26.__