《计算机工程与应用杂志》发表论文赏析
作者:徐 春1,2,3,杨 勇4,蒋同海1
单位:1.中国科学院 新疆理化技术研究所,乌鲁木齐 830011;2.中国科学院大学,北京100049;3.新疆财经大学 计算机科学与工程学院,乌鲁木齐 830012;4.新疆师范大学 计算机科学技术学院,乌鲁木齐 830054
摘要:针对现有维吾尔语形态分析研究中存在的数据稀疏、模型构建复杂等问题,提出一种基于机器翻译的维吾尔语形态分析模型,即将维吾尔语词干提取(词性标注)任务中词干提取前(词性标注前)的句子看作是机器翻译模型训练过程中的源语言端,词干提取后(词性标注后)的句子看作是目标语言端;为了达到最佳的效果,加入了外部信息模块和联合校验模块以优化模型。实验结果表明,基于机器翻译框架的维吾尔语形态分析模型在词干提取、词性标注两个任务上优于其他模型。对比英语(词干提取、词性标注)、汉语(分词、词性标注)实验结果,提出的方法更适合维吾尔语形态分析。
关键词:维吾尔语形态分析,基于机器翻译,词干提取,词性标注,模型优化