基于句法分析的代码摘要技术

来源：计算机应用杂志2015年第7期北京时间：

作者：王金水, 薛醒思, 翁伟

单位：1. 福建工程学院 信息科学与工程学院, 福州 350108;2. 厦门理工学院 计算机与信息工程学院, 福建 厦门 361024

摘要：针对词袋模型忽略了词条之间语义关系和概念结构的问题,提出一种基于句法分析的代码摘要技术。首先,该技术利用词性标注识别出最有可能体现代码特性的关键词;然后,通过块分析修正在词性标注过程中可能引入的错误;其次,对标识出的关键词进行降噪,以减少文本噪声带来的不利影响;最后,从关键词中选取若干个权值最高的词以组成代码摘要。实验结果表明,与基于词频-逆文档频率(TF-IDF)和基于TF-IDF扩展的代码摘要技术对比,所提技术生成的代码摘要与参考答案的重叠率(overlap)至少分别提高了9%和6%,说明该技术能够生成更加准确的代码摘要。

关键词：代码摘要,文本摘要,句法分析,自然语言处理,程序理解

基金资助：国家自然科学基金资助项目(61402108);福建省中青年教师教育科研资助项目(JA14221);福建工程学院科研启动基金资助项目(GY-Z13113; GY-Z14068)。