“民歌智能交互体感厅”问世
更新时间:2025-01-06 00:00 浏览量:4
本文转自:中国文化报
本报记者 李荣坤
访客佩戴上虚拟现实眼镜,沉浸在系统构建的多样化演唱场景中。 项目方供图
当传统民歌旋律飘进高科技的实验室,将会碰撞出怎样的火花?
“基于人工智能的民歌智能创作与场景重建研究”项目,由民歌智能计算与服务技术文化和旅游部重点实验室(简称“实验室”)承担。项目依托陕西师范大学计算机科学学院、新闻与传播学院、现代教学技术教育部重点实验室、音乐学院等的集体智慧,利用人工智能技术、物联网与传感器技术、5G通信技术以及虚拟现实技术,对民歌的智能汇集、智能生成与创作等开展研究,内容包括智能解析与标注、音乐智能生成、音乐风格迁移,以及民歌场景智能解析与场景重构等。
首先是民歌资源的汇集。做好民歌资源的数字化和智能解析,对每一首入库的歌曲做好标识后进行储存,从而构建民歌资源库。“这一过程不单要收集民歌本体、音乐特征、曲调、配器,还包括与之相关的乐器、舞蹈、民间习俗、服饰、方言等多维度特征的智能标注、解析与存储。每首民歌都可以精准提取创作者、表演者、歌词内容、音乐情感、曲调等不同特征属性,为民歌的全面记录与传承提供了有力保障。”实验室副主任、陕西师范大学博士生导师张玉梅说,截至目前,资源库已收录民歌相关文化资源30余万条。
有了丰富的资源库作支撑,就可以依据系统所归纳的民歌特征,利用人工智能技术进行音乐智能创作。这一功能与广为人知的人工智能大模型有异曲同工之妙,能够根据不同的需求,灵活生成诸如西安鼓乐、陕北民歌等多种类型的音乐作品。
目前,实验室已成功研发出承载关键技术的集成装备,其中首台设备——智能交互体感厅已在陕北民歌博物馆与公众见面。
在这个装备内部,工作人员构建了一个全面的陕北民歌知识库,并配备了智能问答系统,访客能够与数字人进行实时互动交流。通过人机交互技术,还能构建一个与民歌特征契合的虚拟场景,表演者的表情、姿态、声音等能实时迁移到数字人身上。此外,访客还可以佩戴上虚拟现实眼镜,沉浸在这一独特的体验之中。表演结束后,系统还会对歌曲演唱质量进行评分,并提供二维码供访客扫描下载自己的表演视频。
目前,实验室围绕以民歌为主的文化资源活化利用研究取得了一定进展。“下一步,我们还将把这一成果拓展至博物馆、科技馆、旅游景区等多种文旅场景,让文化与科技的融合成果走进大众视野,惠及广大民众。”张玉梅说。