《面向中文电子病历NLP关键技术研究.ppt》由会员分享，可在线阅读，更多相关《面向中文电子病历NLP关键技术研究.ppt（39页珍藏版）》请在三一文库上搜索。
1、面向中文电子病历的NLP关键技术研究,2014年4月13日 Copyrights 2014 HIT All Rights Reserved,蒋志鹏 关毅 哈尔滨工业大学计算机学院 xyf-,电子病历(EMR),医务人员在医疗活动过程中，使用医疗机构信息系统生成的文字、符号、图表、图形、数据、影像等数字化信息，并能实现存储、管理、传输和重现的医疗记录,2014年4月13日 Copyrights 2014HIT All Rights Reserved,中文电子病历(CEMR),对患者身体状况的半结构化专业描述,2014年4月13日 Copyrights 2014HIT All Rights Res
2、erved,中文电子病历(CEMR),医疗大数据 每天约800份 每月约15000份 每年约15万份,2014年4月13日 Copyrights 2014HIT All Rights Reserved,中文电子病历(CEMR),2014年4月13日 Copyrights 2014HIT All Rights Reserved,目前在CEMR方面展开的研究工作,CEMR句法树库构建,2014年4月13日 Copyrights 2014 HIT All Rights Reserved,语法标注规范制定 语法标注结果及分析 高精度词性标注系统,语法标注规范制定,2014年4月13日 Copyrigh
3、ts 2014HIT All Rights Reserved,基于PCTB规范进行迭代修订 人机互助 医生协助 一致性评价,语法标注规范制定,2014年4月13日 Copyrights 2014HIT All Rights Reserved,规范中一些重要修订 筛选、补充、细化PCTB词性标注规范 例如，“伴有视物模糊”中的“视物” 提出适用于CEMR的术语切分方案 PCTB：“吃饭”不切分，“吃梨”“吃桃”切分 CEMR：“持物”“抗凝”是否切分？,以“抗凝”为例：,语法标注规范制定,2014年4月13日 Copyrights 2014HIT All Rights Reserved,标注质量
4、控制 表1 规范修订前后主要词性歧义项分布 表2 前3次迭代分词和词性标注准确率及一致性,语法标注规范制定,2014年4月13日 Copyrights 2014HIT All Rights Reserved,分词、词性标注、句法标注规范,语法标注规范制定,2014年4月13日 Copyrights 2014HIT All Rights Reserved,标注结果 138份带有词性、句法标签的电子病历 来自神经内科和普通外科 包括出院小结和首次病程记录,语法标注规范制定,2014年4月13日 Copyrights 2014HIT All Rights Reserved,CEMR句法树库构建的主要
5、困难： 目前没有任何基于CEMR的标注语料 各级标注均需要医生的参与 不同医疗机构、不同科室病历差异较大,CEMR句法树库构建,2014年4月13日 Copyrights 2014 HIT All Rights Reserved,语法标注规范制定 语法标注结果分析 高精度词性标注系统,语法标注结果分析,2014年4月13日 Copyrights 2014HIT All Rights Reserved,CEMR文本语言的特点： 包含大量专业术语（如“共济运动”、 “脑梗死”）、习惯用语（如“伴”、“否认”）及缩略词（如“CT”、“MMR”） 常用数字、量词和形容词表示检查结果（如“100/70m
6、mHg”） 句子结构不完整，但规律性较强 频繁使用并列长句，导致句法结构趋于扁平,语法标注结果分析,2014年4月13日 Copyrights 2014HIT All Rights Reserved,通用标注模型效果 词性标注 平均准确率仅为 82.35%,Fig.2a 出院小结各部分标注效果 Fig.2b 首次病程记录各部分标注效果,语法标注结果分析,2014年4月13日 Copyrights 2014HIT All Rights Reserved,通用标注模型效果 句法分析 F1(auto pos) ：53.58% F1(gold pos) ：73.19%,Fig.3a 出院小结各部分标注
7、效果 Fig.3b 首次病程记录各部分标注效果,语法标注结果分析,2014年4月13日 Copyrights 2014HIT All Rights Reserved,实验数据： 训练集：56份中文电子病历 调试集：14份中文电子病历 实验结果：,CEMR句法树库构建,2014年4月13日 Copyrights 2014 HIT All Rights Reserved,语法标注规范制定 语法标注结果及分析 高精度词性标注系统,系统处理流程,2014年4月13日 Copyrights 2014HIT All Rights Reserved111,中文分词与词性标注的联合模型,2014年4月13日
8、Copyrights 2014HIT All Rights Reserved,感知器算法,输入：,训练样本；迭代次数T,初始化：,参数向量,训练过程：,for t = 1.T, i = 1.n,使用beam search 算法找到当前参数下满足下面条件的标注序列,如果,则更新参数向量,输出：,参数向量,基于转移的错误驱动模型,2014年4月13日 Copyrights 2014HIT All Rights Reserved,提出适用于CEMR的转移模板 扩展经典的训练算法： 1. 以转换前为当前词的规则 2. 以转换前为条件的规则 3. 以转换后为当前词的规则 4. 以转换后为条件的规则,实验
9、结果及分析,2014年4月13日 Copyrights 2014HIT All Rights Reserved,实验数据： 训练集：PCTB语料+110份中文电子病历 调试集：14份中文电子病历 测试集：14份中文电子病历 实验结果,CEMR实体和实体关系语料构建,2014年4月13日 Copyrights 2014 HIT All Rights Reserved,实体标注语料规模和科室分布 标注语料中实体的统计分析 实体标注规范制定 实体标注结果及评价,实体标注语料规模,2014年4月13日 Copyrights 2014HIT All Rights Reserved,CEMR实体标注语料规
10、模 原始语料：2012全年的电子病历，共144230份，来自35个科室，87个子科室 已校对语料：3085份中文电子病历，按照上述子科室平均抽取 已标注语料：991份中文电子病历，包含为479420个字符，35327个实体,实体标注语料科室分布,2014年4月13日 Copyrights 2014HIT All Rights Reserved,CEMR实体标注语料分布,CEMR实体和实体关系语料构建,2014年4月13日 Copyrights 2014 HIT All Rights Reserved,实体标注语料规模和科室分布 标注语料中实体的统计分析 实体标注规范制定 实体标注结果及评价,标
11、注语料中实体的统计分析,2014年4月13日 Copyrights 2014HIT All Rights Reserved,对比CEMR和开放领域语料的实体密集度 开放领域语料：MET-2中的中文新闻语料，共104个文档,CEMR实体和实体关系语料构建,2014年4月13日 Copyrights 2014 HIT All Rights Reserved,实体标注语料规模和科室分布 标注语料中实体的统计分析 实体标注规范制定 实体标注结果及评价,实体标注语料构建团队,2014年4月13日 Copyrights 2014HIT All Rights Reserved,语料构建团队 研究室成员： 2
12、名博士生，1名硕士生 主要负责标注规范初步制定、实体关系标注 参与标注的医生： 哈医大四院神经内科医生（硕士） 哈医大二院呼吸内科医生（博士） 主要负责标注规范修订、实体标注和标注人员培训,实体标注规范制定,2014年4月13日 Copyrights 2014HIT All Rights Reserved,实体标注规范制定 实体标注培训,The realization of Chinese interface for UMLS,2019/3/13,2014年4月13日 Copyrights 2014HIT All Rights Reserved,实体标注规范制定,CEMR实体和 实体关系标注规
13、范,CEMR实体和实体关系语料构建,2014年4月13日 Copyrights 2014 HIT All Rights Reserved,实体标注语料规模和科室分布 标注语料中实体的统计分析 实体标注规范制定 实体标注结果及评价,The realization of Chinese interface for UMLS,2019/3/13,2014年4月13日 Copyrights 2014HIT All Rights Reserved,实体标注结果,CEMR实体标注样例,The realization of Chinese interface for UMLS,2019/3/13,2014年
14、4月13日 Copyrights 2014HIT All Rights Reserved,实体标注结果,CEMR实体关系标注样例,实体标注语料一致性评价,2014年4月13日 Copyrights 2014HIT All Rights Reserved,正式标注质量控制,实体标注语料一致性评价,2014年4月13日 Copyrights 2014HIT All Rights Reserved,评价标准 实体边界匹配 实体边界、实体类型匹配 实体边界、实体类型、实体修饰类型匹配,其他研究工作,2014年4月13日 Copyrights 2014HIT All Rights Reserved,CE
15、MR,PHK,UMLS,个性化健康信息抽取,个性化健康知识表示,个性化健康知识维护,已录用文章,2014年4月13日 Copyrights 2014HIT All Rights Reserved,Xinbo Lv, Yi Guan, Benyang Deng. Transfer Learning based Clinical Concept Extraction on Data from Multiple Sources. Journal of Biomedical Informations,2014 (SCI 2.131) 杨锦锋, 于秋滨, 关毅, 蒋志鹏. 电子病历命名实体识别和实体关系抽取研究综述，自动化学报，2014 (long) 蒋志鹏, 赵芳芳, 关毅, 杨锦锋. 面向中文电子病历的词法语料标注研究. 高技术通讯, 2014,6,谢谢!,2014年4月13日 Copyrights 2014 HIT All Rights Reserved,Q&A,