• 综合
  • 标题
  • 关键词
  • 摘要
  • 学者
  • 期刊-刊名
  • 期刊-ISSN
  • 会议名称
搜索

作者:

黄志清 (黄志清.) | 贾翔 (贾翔.) | 郭一帆 (郭一帆.) | 张菁 (张菁.)

收录:

EI Scopus CSCD

摘要:

光学乐谱识别是音乐信息检索中一项重要技术,音符识别是乐谱识别及其关键的部分.针对目前乐谱图像音符识别精度低、步骤冗杂等问题,设计了基于深度学习的端到端音符识别模型.该模型利用深度卷积神经网络,以整张乐谱图像为输入,直接输出音符的时值和音高.在数据预处理上,通过解析MusicXML文件获得模型训练所需的乐谱图像和对应的标签数据,标签数据是由音符音高、音符时值和音符坐标组成的向量,因此模型通过训练来学习标签向量将音符识别任务转化为检测、分类任务.之后添加噪声、随机裁剪等数据增强方法来增加数据的多样性,使得训练出的模型更加鲁棒;在模型设计上,基于darknet53基础网络和特征融合技术,设计端到端的目标检测模型来识别音符.用深度神经网络darknet53提取乐谱图像特征图,让该特征图上的音符有足够大的感受野,之后将神经网络上层特征图和该特征图进行拼接,完成特征融合使得音符有更明显的特征纹理,从而让模型能够检测到音符这类小物体.该模型采用多任务学习,同时学习音高、时值的分类任务和音符坐标的回归任务,提高了模型的泛化能力.最后在MuseScore生成的测试集上对该模型进行测试,音符识别精度高,可以达到0.96的时值准确率和0.98的音高准确率.

关键词:

目标检测 音符识别 深度学习 端到端 光学乐谱识别

作者机构:

  • [ 1 ] [黄志清]北京工业大学信息学部,北京,100022
  • [ 2 ] [贾翔]北京工业大学信息学部,北京,100022
  • [ 3 ] [郭一帆]北京工业大学信息学部,北京,100022
  • [ 4 ] [张菁]北京工业大学信息学部,北京,100022

通讯作者信息:

电子邮件地址:

查看成果更多字段

相关关键词:

来源 :

天津大学学报

ISSN: 0493-2137

年份: 2020

期: 6

卷: 53

页码: 653-660

被引次数:

WoS核心集被引频次:

SCOPUS被引频次:

ESI高被引论文在榜: 0 展开所有

万方被引频次: -1

中文被引频次:

近30日浏览量: 1

在线人数/总访问数:230/5035820
地址:北京工业大学图书馆(北京市朝阳区平乐园100号 邮编:100124) 联系我们:010-67392185
版权所有:北京工业大学图书馆 站点建设与维护:北京爱琴海乐之技术有限公司