基于ChatGPT和零样本提示的临床量表文本中结构化项目信息抽取研究
来源：图书情报工作杂志2024年第22期北京时间：
作者：郝洁,莫治强,孙海霞,陈振丽,李姣
单位：1 中国医学科学院/北京协和医学院医学信息研究所 北京 100020;2 中国科学技术大学计算机系 合肥 230027
摘要：[目的/意义] 实现无标注数据情况下使用ChatGPT从自由临床量表文本中抽取结构化的项目信息，高效推进医学量表资源的结构化与智能化。[方法/过程] 定义包含8类属性、兼顾临床量表测量概念结构差异性的项目信息抽取框架，收集59个临床常用心理评定量表文档自建数据集；分类设计零样本提示，调用ChatGPT-3.5和ChatGPT-4官方接口进行实验；多角度分析ChatGPT不同版本在处理不同临床量表文本时的抽取表现和可能影响因素。[结果/结论] 研究结果表明，来源属性抽取表现最佳，Micro-F1和Macro-F1最低也分别达98.90%和97.83%；反应选项、使用说明和计分规则随后；编号和项目指令居中；临床解释最低，Micro-F1和Macro-F1分别为47.73%和45.51%。ChatGPT-4整体表现更优，但部分属性召回率弱于ChatGPT-3.5。量表测量概念层级、维度数、项目数和文本长度的增加会降低模型表现。综上，ChatGPT能够高效辅助医学量表资源的结构化，尤其是在处理简单量表时。
关键词：医学量表,文本结构化,属性抽取,大语言模型,零样本学习,
基金资助：本文系国家社会科学基金项目“基于知识组织的量表资源语义互联研究”（项目编号：21BTQ069）和中国医学科学院医学与健康科技创新工程项目“医学知识管理与智能化知识服务关键技术研究”（项目编号：2021-I2M-1-056）研究成果之一。
