《计算机技术与发展杂志》发表论文赏析

基于多层次特征提取的中文医疗实体识别

来源:计算机技术与发展杂志2023年第09期北京时间:

作者:李正辉;廖光忠

单位:1. 武汉科技大学 计算机科学与技术学院,湖北 武汉 430065;2. 武汉科技大学 智能信息处理与实时工业系统湖北省重点实验室,湖北 武汉 430065

摘要:中文医疗实体识别是医疗领域文本信息处理的基础,但中文医疗文本中常常存在语法不规范、实体嵌套和类型易混淆等问题易造成实体识别精度下降,因此确保中文医疗实体识别的准确度具有较大的理论研究和实际应用价值。为此,提出一种融合 BERT 预训练、双向长短期记忆网络( BILSTM) 和结合注意力机制的空洞卷积网络( IDCNN) 的实体识别模型来提升中文医疗实体识别的精度。 起先,使用 BERT 预训练语言模型使中文字符转换为词向量并增强其语法语义特征;而后将训练好的词向量分别通过 BILSTM 网络和加入注意力机制的 IDCNN 网络获取上下文信息和更大的感受野;最终将蕴含语法语义特征、上下文信息和更大的感受野信息的特征融合并输入到条件随机场( CRF) 中进行实体预测。 在两个公开的医疗数据集 CMeEE / Yidu-S4K 上的实验表明,该模型的 F1 值分别达到了 0. 711 6 和 0. 820 6,较主流模型分别提高了 1. 40 百分点和 2. 29 百分点,验证了此模型在中文医疗实体识别上的有效性。

关键词:实体识别;BERT 预训练;空洞卷积网络;注意力机制;感受野

填文献完整题目 获取完整文献

填写需求
联系方式
注:学术顾问会在1小时内联系您,请留意!