“音乐与AI融合大有可为”

光山新闻网 采集侠 2023-11-08 09:22:01
浏览

“音乐与AI融合大有可为”

 

  “未来音乐会”上,作品《方圆》由演奏家演奏中阮,结合机器狗运动,融合AI和计算机音乐等技术。
  本报记者 林子涵摄

 

  运用深度学习等方式分析人对音乐的情感反馈,通过人工智能(AI)实现作曲、编曲、歌唱……近日,第二届世界音乐人工智能大会暨“未来音乐会”在北京举行。活动由中央音乐学院和中国人工智能学会联合主办,来自音乐人工智能、音乐与脑科学、音乐治疗等领域的专家及音乐产业相关企业代表共同参与,展示音乐与人工智能结合的前沿成果,探索艺术和科学交汇的未来趋势。

  奏响“未来音乐会”

  “欢迎大家来到‘未来音乐会’,我是本次大会的机器人指挥Yu Feng。”聚光灯下,仿真机器人挥手致意,向观众做开场白。

  本届世界音乐人工智能大会以“未来音乐会”启幕,邀请中国音乐家和人工智能团队共同创作,在多部现代音乐作品中运用表情情感识别、3D声场、机器听觉、AI生成视觉等技术。

  音乐会上,作品《连续体》借用物理学“时空连续体”的概念,将声音参数通过洛伦兹方程进行计算和转换,通过3D声场进行呈现;《厄之二——司岗》使用佤族民间乐器“得”“口弦”“铃”进行现场演奏,并用手势控制器、轨迹跟踪控制器等对声音进行变形和重塑;《繁星散落的夜晚》运用基于AI的虚拟乐器,通过深度神经网络模型,检测获取古筝演奏家的手势信息,实时控制音乐的不同声部。

  “艺术与科学的交融令人惊叹。”马里兰大学电子与计算机工程系和系统研究所教授谢哈布·沙玛对本报表示,音乐会与世界顶尖音乐会的演出效果不相上下,充分证明了中国学界在音乐人工智能方面取得的进展。

  中国工程院院士、中国人工智能学会理事长戴琼海表示,音乐与科技结合是音乐领域的创新趋势,进行音乐与人工智能、脑科学的交叉研究有重要意义,将对音乐产业革新带来深远影响。

  “人工智能高速发展,将为音乐提供全新发展空间。目前,人工智能已对传统音乐二级学科产生影响,有望为作曲与作曲技术理论、音乐表演、音乐学、音乐教育、音乐科技、音乐管理等学科带来革新。”中央音乐学院音乐人工智能与音乐信息科技系主任李小兵说。

  “艺术与科学的结合”

  一场音乐会背后,有学界的多年努力。在主旨报告环节,中外专家分享了音乐与人工智能及脑科学的研究进展。

  “AI近年来开始在艺术创作领域崭露头角。透过深度学习和生成对抗网络等技术,AI能学习和模仿艺术作品并生成全新创作。通用大模型技术更为机器创造力提供更多可能性。”香港科技大学首席副校长、英国皇家工程院院士郭毅可介绍,自2021年起,香港科技大学和香港浸会大学合作开发“人机共生艺术创造平台”。目前,团队在人声合成、面部表情模拟、自动编舞、基于文字描述生成图像视频等方面已取得多项突破。

  “大脑通过听觉系统感知自然界多姿多彩的声学环境和优美动听的音乐。音乐信号有特殊的时域和频域特征,听觉系统通过一系列复杂处理提取音乐中的信息及特征。大脑基于这些特征形成对音乐的感知,包括音乐情感和审美等高级认知,并进一步产生音乐的记忆。”清华大学脑与智能实验室主任、教授王小勤说,过去20多年,全球关于大脑如何处理音乐的脑科学研究有较快发展。目前,他和团队正围绕大脑处理音乐的神经机理进行研究。

  论坛期间,围绕艺术与科学的关系,专家进行多番探讨。