基于掩蔽自监督语音特征提取的帕金森病检测方法

来源：电子与信息学报杂志2023年第10期北京时间：

作者：季薇, 杨茗淇, 李云, 郑慧芬

单位：1.南京邮电大学通信与信息工程学院 南京 2100032.南京邮电大学计算机学院 南京 2100233.南京医科大学附属老年医院 南京 210024

摘要：帕金森病是一种常见的慢性神经系统疾病，构音障碍是帕金森病的早期症状之一。基于语音进行帕金森病的辅助诊疗有助于更早发现病情和观测病情的发展。传统方法常通过对语音特征(如频率微扰、振幅微扰等)的参数计算来进行疾病评估，然而这些特征可能无法全面反映所有的病理现象，从而影响了检测和评估的准确率。为更好地提取帕金森病患者语音中的病理信息，提升检测和评估的准确率，该文提出一种基于掩蔽自监督语音特征提取的帕金森病检测方法。首先，从帕金森病患者的原始语音中提取Mel语谱图特征，得到患者富含病理特征的全局时序化表示；然后，对部分Mel语谱图特征进行掩蔽，并通过掩蔽自监督模型对掩蔽部分进行重构，从而学习到帕金森病患者语音特征的更高级表示。为解决帕金森病语音数据稀缺的问题，该文先在LibriSpeech公开数据集上进行掩蔽自监督模型的预训练，然后基于迁移学习的思想，利用帕金森病语音数据对预训练好的掩蔽自监督模型进行微调和加权求和，以提升该模型特征表示学习的性能。最终，使用随机森林和支持向量机分类器分别对提取好的语音特征进行分类，以实现帕金森病的检测。该文在MaxLittle公开数据集和课题组自采数据集上，采用10折交叉验证的方法验证了所提方法的有效性。结果表明，与传统的Mel语谱图特征检测方法和其他经典的自监督特征提取方法相比，所提方法在准确率、敏感度、特异度性能方面均有明显提升。

关键词：帕金森病, 自监督学习, 迁移学习, 特征提取

基金资助：江苏省高校基础科学(自然科学)重大项目(21KJA520003)，江苏省研究生实践创新计划项目(SJCX21_0257)