肺炎分类方法、装置、介质及电子设备转让专利

申请号 : CN202010189088.1

文献号 : CN111415743B

文献日 :

基本信息:

PDF:

法律信息:

相似专利:

发明人 : 王瑜赵朝炜张欢孙岩峰邹彤刘丰恺黄秋峰俞剑舟李新阳王少康陈宽

申请人 : 推想医疗科技股份有限公司

摘要 :

本发明公开了一种肺炎分类方法、分类装置、计算机可读存储介质以及电子设备,通过将获取的肺炎征象和被检测者的临床信息输入第一神经网络模型,由第一神经网络模型自动识别肺炎的类型,在考虑肺炎征象等病理性特征的同时结合被检测者的临床信息,从而更加准确的识别出肺炎的类型,不仅能够实现自动区分肺炎类型,并且能够保证其准确性,从而为后续的治疗提供更为准确和细化的类型信息,保证后续治疗更有针对性,也更有效果。

权利要求 :

1.一种电子设备,所述电子设备包括:处理器;

用于存储所述处理器可执行指令的存储器;

所述处理器,用于执行一种肺炎分类方法,包括:获取CT图像中肺部区域的肺炎征象图像;

获取所述CT图像对应的被检测者的临床信息,其中,所述临床信息包括以下信息中的一种或多种的组合:体温信息、咳嗽症状信息、病史信息;以及根据所述肺炎征象图像和所述临床信息,综合得到所述被检测者的肺炎类型;

其中,得到所述被检测者的肺炎类型的实现方式为:将所述肺炎征象图像和所述临床信息输入第一神经网络模型,得到所述被检测者的肺炎类型;

其中,所述获取CT图像中肺部区域的肺炎征象图像包括:基于CT图像中的肺部区域图像,分别生成多个肺部征象图像,其中,所述肺部征象图像包括如下征象图像中的任一种或多种的组合:肺实变图像、磨玻璃影图像、肿块图像、树芽征图像、结节图像、空洞图像、晕征图像;以及将所述多个肺部征象图像中与肺炎相关的肺部征象组合,得到肺炎征象图像;

其中,分别生成多个肺部征象图像的方式包括:将所述肺部区域图像分别输入多个第二神经网络模型,得到所述多个肺部征象图像,其中,所述多个第二神经网络模型为针对不同的肺部征象训练得到的不同的第二神经网络模型。

2.根据权利要求1所述的电子设备,其特征在于,所述肺部区域图像包括多层二维图像;所述将所述肺部区域图像分别输入多个第二神经网络模型,得到所述多个肺部征象图像包括:

逐次将所述多层二维图像中的一部分分别输入所述多个第二神经网络模型,或者将所述多层二维图像分别输入所述多个第二神经网络模型,得到分别对应所述多个肺部征象图像的多层二维征象图像;以及

分别将对应同一肺部征象图像的所述多层二维征象图像叠加,得到所述多个肺部征象图像。

3.根据权利要求2所述的电子设备,其特征在于,在所述得到所述多个肺部征象图像之后,还包括:

对所述多个肺部征象图像分别进行腐蚀膨胀操作。

4.根据权利要求1所述的电子设备,其特征在于,所述肺部区域图像的获取方式包括:获取所述CT图像中的肋骨区域图像;

获取所述CT图像中肺部区域的粗分割图像;以及以所述肋骨区域图像为所述肺部区域的边界,并且以所述粗分割图像为种子区域,以预设的步长向周围扩张至所述肺部区域的边界,得到所述肺部区域图像。

5.根据权利要求4所述的电子设备,其特征在于,在所述获取所述CT图像中肺部区域的粗分割图像之后,还包括:

对所述粗分割图像进行腐蚀操作,得到腐蚀后的粗分割图像;

所述以所述肋骨区域图像为所述肺部区域的边界,并且以所述粗分割图像为种子区域,以预设的步长向周围扩张至所述肺部区域的边界,得到所述肺部区域图像包括:以所述肋骨区域图像为所述肺部区域的边界,并且以所述腐蚀后的粗分割图像为种子区域扩张,以预设的步长向周围扩张至所述肺部区域的边界,得到所述肺部区域图像。

6.一种肺炎分类装置,其特征在于,包括:肺炎征象获取模块,用于获取CT图像中肺部区域的肺炎征象图像;

临床信息获取模块,用于获取所述CT图像对应的被检测者的临床信息,其中,所述临床信息包括以下信息中的一种或多种的组合:体温信息、咳嗽症状信息、病史信息;以及肺炎类型获取模块,用于根据所述肺炎征象图像和所述临床信息,综合得到所述被检测者的肺炎类型;

其中,肺炎类型获取模块进一步配置为:将所述肺炎征象图像和所述临床信息输入第一神经网络模型,得到所述被检测者的肺炎类型;

其中,所述肺炎征象获取模块进一步配置为:基于CT图像中的肺部区域图像,分别生成多个肺部征象图像,其中,所述肺部征象图像包括如下征象图像中的任一种或多种的组合:肺实变图像、磨玻璃影图像、肿块图像、树芽征图像、结节图像、空洞图像、晕征图像;以及将所述多个肺部征象图像中与肺炎相关的肺部征象组合,得到肺炎征象图像;

其中,分别生成多个肺部征象图像的方式包括:将所述肺部区域图像分别输入多个第二神经网络模型,得到所述多个肺部征象图像,其中,所述多个第二神经网络模型为针对不同的肺部征象训练得到的不同的第二神经网络模型。

7.一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序用于执行上述权利要求1‑5任一所述的肺炎分类方法。

说明书 :

肺炎分类方法、装置、介质及电子设备

技术领域

[0001] 本申请涉及图像处理领域,具体涉及基于CT图像的肺炎分类方法、分类装置、计算机可读存储介质以及电子设备。

背景技术

[0002] 电脑断层扫描(Computed Tomography,简称CT)是一种利用数位几何处理后重建的三维放射线医学影像。该技术主要通过单一轴面的X射线旋转照射人体,由于不同的组织
对X射线的吸收能力(或称阻射率)不同,可以用电脑的三维技术重建出断层面影像,经由窗
宽、窗位处理,可以得到相应组织的断层影像,将断层影像层层堆叠,即可形成立体影像。
[0003] 通过CT图像可以获知被检测者是否为肺炎患者,特别是应对新型冠状病毒所造成的肺炎患者的检测,CT图像检测是最为重要且最为准确的方法之一。目前通过CT图像获知
被检测者是否患有肺炎的具体做法通常是根据CT图像中的肺炎征象来判断,然而由于肺炎
征象包括多个,而且较为复杂,单纯的依靠一类或几类肺炎征象是很难准确判断是否患有
肺炎,同时,不同类型的肺炎是很难区分的,例如细菌性肺炎和病毒性肺炎,以及感冒病毒
性肺炎和新型冠状病毒性肺炎等都是很难不依靠专业医务人员而区分的,并且,由于不同
的被检测者其CT图像和症状都可能不同,因而其治疗的方式可能也会有所区别,需要对其
进行分类,因此,亟需一种能够自动区分各种肺炎类别的方法。

发明内容

[0004] 为了解决上述技术问题,本申请提出了一种肺炎分类方法、分类装置、计算机可读存储介质以及电子设备,通过将获取的肺炎征象和被检测者的临床信息输入第一神经网络
模型,由第一神经网络模型自动识别肺炎的类型,在考虑肺炎征象等病理性特征的同时结
合被检测者的临床信息,从而更加准确的识别出肺炎的类型,不仅能够实现自动区分肺炎
类型,并且能够保证其准确性,从而为后续的治疗提供更为准确和细化的类型信息,保证后
续治疗更有针对性,也更有效果。
[0005] 根据本申请的一个方面,提供了一种肺炎分类方法,包括:获取CT图像中肺部区域的肺炎征象图像;获取所述CT图像对应的被检测者的临床信息;以及根据所述肺炎征象图
像和所述临床信息,综合得到所述被检测者的肺炎类型;其中,得到所述被检测者的肺炎类
型的实现方式为:将所述肺炎征象图像和所述临床信息输入第一神经网络模型,得到所述
被检测者的肺炎类型。
[0006] 在一实施例中,所述临床信息包括以下信息中的一种或多种的组合:体温信息、咳嗽症状信息、病史信息。
[0007] 在一实施例中,所述获取CT图像中肺部区域的肺炎征象图像包括:基于CT图像中的肺部区域图像,分别生成多个肺部征象图像;以及将所述多个肺部征象图像组合,得到肺
炎征象图像;其中,分别生成多个肺部征象图像的方式包括:将所述肺部区域图像分别输入
多个第二神经网络模型,得到所述多个肺部征象图像。
[0008] 在一实施例中,所述肺部区域图像包括多层二维图像;所述将所述肺部区域图像分别输入多个第二神经网络模型,得到所述多个肺部征象图像包括:逐次将所述多层二维
图像中的一部分分别输入所述多个第二神经网络模型,或者将所述多层二维图像分别输入
所述多个第二神经网络模型,得到分别对应所述多个肺部征象图像的多层二维征象图像;
以及分别将对应同一肺部征象图像的所述多层二维征象图像叠加,得到所述多个肺部征象
图像。
[0009] 在一实施例中,在所述得到所述多个肺部征象图像之后,所述肺炎征象图像获取方法还包括:对所述多个肺部征象图像分别进行腐蚀膨胀操作。
[0010] 在一实施例中,所述肺部区域图像的获取方式包括:获取所述CT图像中的肋骨区域图像;获取所述CT图像中肺部区域的粗分割图像;以及以所述肋骨区域图像为所述肺部
区域的边界,并且以所述粗分割图像为种子区域,以预设的步长向周围扩张至所述肺部区
域的边界,得到所述肺部区域图像。
[0011] 在一实施例中,在所述获取所述CT图像中肺部区域的粗分割图像之后,所述肺部区域图像的获取方法还包括:对所述粗分割图像进行腐蚀操作,得到腐蚀后的粗分割图像;
所述以所述肋骨区域图像为所述肺部区域的边界,并且以所述粗分割图像为种子区域,以
预设的步长向周围扩张至所述肺部区域的边界,得到所述肺部区域图像包括:以所述肋骨
区域图像为所述肺部区域的边界,并且以所述腐蚀后的粗分割图像为种子区域扩张,以预
设的步长向周围扩张至所述肺部区域的边界,得到所述肺部区域图像。
[0012] 根据本申请的另一个方面,提供了一种肺炎分类装置,包括:肺炎征象获取模块,用于获取CT图像中肺部区域的肺炎征象图像;临床信息获取模块,用于获取所述CT图像对
应的被检测者的临床信息;以及肺炎类型获取模块,用于根据所述肺炎征象图像和所述临
床信息,综合得到所述被检测者的肺炎类型;其中,肺炎类型获取模块进一步配置为:将所
述肺炎征象图像和所述临床信息输入第一神经网络模型,得到所述被检测者的肺炎类型。
[0013] 根据本申请的另一个方面,提供了一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序用于执行上述任一所述的肺炎分类方法。
[0014] 根据本申请的另一个方面,提供了一种电子设备,所述电子设备包括:处理器;用于存储所述处理器可执行指令的存储器;所述处理器,用于执行上述任一所述的肺炎分类
方法。
[0015] 本申请提供的一种肺炎分类方法、分类装置、计算机可读存储介质以及电子设备,通过将获取的肺炎征象和被检测者的临床信息输入第一神经网络模型,由第一神经网络模
型自动识别肺炎的类型,在考虑肺炎征象等病理性特征的同时结合被检测者的临床信息,
从而更加准确的识别出肺炎的类型,不仅能够实现自动区分肺炎类型,并且能够保证其准
确性,从而为后续的治疗提供更为准确和细化的类型信息,保证后续治疗更有针对性,也更
有效果。

附图说明

[0016] 通过结合附图对本申请实施例进行更详细的描述,本申请的上述以及其他目的、特征和优势将变得更加明显。附图用来提供对本申请实施例的进一步理解,并且构成说明
书的一部分,与本申请实施例一起用于解释本申请,并不构成对本申请的限制。在附图中,
相同的参考标号通常代表相同部件或步骤。
[0017] 图1是本申请一示例性实施例提供的一种肺炎分类方法的流程示意图。
[0018] 图2是本申请一示例性实施例提供的一种肺炎征象的分割方法的流程示意图。
[0019] 图3是本申请另一示例性实施例提供的一种肺炎征象的分割方法的流程示意图。
[0020] 图4是本申请另一示例性实施例提供的一种肺炎征象的分割方法的流程示意图。
[0021] 图5是本申请一示例性实施例提供的一种肺部区域图像分割方法的流程示意图。
[0022] 图6是本申请另一示例性实施例提供的一种肺部区域分割方法的流程示意图。
[0023] 图7是本申请一示例性实施例提供的一种肋骨区域图像的获取方法的流程示意图。
[0024] 图8是本申请另一示例性实施例提供的一种肺部区域分割方法的流程示意图。
[0025] 图9是本申请另一示例性实施例提供的一种肺部分区域割方法的流程示意图。
[0026] 图10是本申请一示例性实施例提供的一种肺炎分类装置的结构示意图。
[0027] 图11是本申请另一示例性实施例提供的一种肺炎分类装置的结构示意图。
[0028] 图12是本申请一示例性实施例提供的电子设备的结构图。

具体实施方式

[0029] 下面,将参考附图详细地描述根据本申请的示例实施例。显然,所描述的实施例仅仅是本申请的一部分实施例,而不是本申请的全部实施例,应理解,本申请不受这里描述的
示例实施例的限制。
[0030] 申请概述
[0031] 肺炎是一种因为多种因素引发的肺部的炎症,对于肺炎患者来说在疾病发生的时候往往会伴随剧烈的咳嗽现象。肺炎分为两种,一种是细菌引起的细菌性的肺炎,因为细菌
侵袭肺部导致的肺炎,其中最为常见的肺炎球菌,和甲型溶血性链球菌这两种细菌细菌,大
部分的细菌性肺炎都是因为这两种细菌导致的;另一种就是病毒引起的病毒性的肺炎,最
常见的就是由一级巨细病毒引发的流感病毒,又例如2019新型冠状病毒等,病毒性的肺炎
相对来于细菌性的肺炎来说,不仅更严重一些,治疗的难度相对来说也会更高。
[0032] 如上所述,CT图像检测是获知被检测者是否为肺炎患者最为重要且最为准确的方法之一,特别是应对新型冠状病毒所造成的肺炎患者。通常得到CT图像后需要对其中的肺
部区域进行分割,以得到肺部区域图像,然后对肺部区域内的肺炎征象进行分割,最后由医
生根据分割得到的肺炎征象来判断被检测者是否患有肺炎,现有的肺炎分类的工作通常是
由专业的医护人员手动实现,显然这样的效率是较低的,特别是应对传染性很强的新型冠
状病毒所造成的肺炎的检测,因为其具有高传染性而导致大量的人有感染隐患,这就需要
对大量的人做CT图像检测,而其又与其他的病毒性肺炎(如感冒病毒肺炎)相似,其分类难
度较大,相对有限甚至紧缺的医务人员显然不能满足大量且难度较大的CT图像检测的需
求。
[0033] 随着图像处理的快速发展,越来越多的医学图像的处理都可以通过计算机进行处理,例如图像分割,以得到诊断所需要的感兴趣区域图像或者基础数据等。然而肺炎征象包
括多个,其中有的征象在CT图像中与其他组织的密度(在CT图像中表象为CT值)区别较大,
可以较为容易的分割出来,而有的征象在CT图像中与其他组织的密度区别较小,很难通过
密度的比较进行分割,或者分割的精度不高;同时,由于肺炎患者常常因为咳嗽和吸气不足
而导致图像的运动噪声较大,并且肺部内密度升高,从而导致肺部区域分割时存在较大的
难度,同时,肺炎病灶的区域较大会影响到肺部的形状和结构,从而导致肺部的分割难度进
一步提高,这样会影响到分割肺炎征象的精度,产生一定的误差,并且该误差的传递和累积
会最终影响医生的判断,造成不可估量的后果,并且,由于不同的被检测者其CT图像和症状
都可能不同,因而其治疗的方式可能也会有所区别,因此,需要对其进行分类。
[0034] 出于解决上述问题,本申请提供的一种肺炎分类方法,通过将获取的肺炎征象和被检测者的临床信息输入第一神经网络模型,由第一神经网络模型自动识别肺炎的类型,
在考虑肺炎征象等病理性特征的同时结合被检测者的临床信息,从而更加准确的识别出肺
炎的类型,不仅能够实现自动区分肺炎类型,并且能够保证其准确性,从而为后续的治疗提
供更为准确和细化的类型信息,保证后续治疗更有针对性,也更有效果。
[0035] 示例性方法
[0036] 图1是本申请一示例性实施例提供的一种肺炎分类方法的流程示意图。如图1所示,该方法包括如下步骤:
[0037] 步骤110:获取CT图像中肺部区域的肺炎征象图像。
[0038] 通过拍摄CT图像来获知被检测者肺部区域图像,并且根据该肺部区域图像可以准确的判断该被检测者是否患有肺炎,对于目前严峻的新型冠状病毒性肺炎,要遏制住病毒
的蔓延,就需要将患有肺炎或携带该病毒的患者与其他人群隔离开来,如此就需要对疑似
人员进行甄别,而作为甄别肺炎患者的有效措施之一的CT图像检测是特别重要的。肺炎患
者的肺部区域在CT图像下会存在一定的征象的,因此,肺炎征象可以作为判断是否患有肺
炎和区分肺炎类型的一个依据。
[0039] 步骤120:获取CT图像对应的被检测者的临床信息。
[0040] 在一实施例中,临床信息包括以下信息中的一种或多种的组合:体温信息、咳嗽症状信息、病史信息等信息。由于不同的被检测者因其临床信息不同而导致其症状和CT图像
中的肺炎征象也会有所区别,单纯依据CT图像中的肺炎征象可能会导致结果不准确,从而
会导致后续治疗不是最有效的,例如有的被检测者的CT图像中肺炎征象显示其只是轻度肺
炎,但是其有常年的肺炎病史或者其有高烧、咳嗽等症状,针对这样的被检测者可以考虑将
其认定为中度或重度肺炎患者。因此,需要综合考虑肺炎征象信息和被检测者的临床信息,
以得到更为准确和更为精确的肺炎类型,从而为后续的精确治疗提供更好的数据指导。
[0041] 步骤130:根据肺炎征象图像和临床信息,综合得到被检测者的肺炎类型;其中,得到被检测者的肺炎类型的实现方式为:将肺炎征象图像和临床信息输入第一神经网络模
型,得到被检测者的肺炎类型。
[0042] 通过第一神经网络模型自动识别被检测者的肺炎类型,从而节省医务人员的工作强度,为医务人员的最终诊断提供一个数据参考,并且为后续的精准治疗提供了数据依据。
在一实施例中,第一神经网络模型可以是深度学习神经网络模型,优选地,第一神经网络模
型可以是Unet神经网络模型。在一实施例中,第一神经网络模型在训练方式可以是:选取已
经分割并标注出肺炎征象的肺部区域图像、被检测者的临床信息以及对应的肺炎类型作为
第一神经网络模型的训练样本来训练第一神经网络模型;并且第一神经网络模型在分类的
过程中得到的分类结果也可以由第三方检测机构进行验证和修改,并且可以将修改后的结
果作为样本再次训练第一神经网络模型,从而进一步提高第一神经网络模型的分类精度。
[0043] 本申请提出了一种肺炎分类方法,通过将获取的肺炎征象和被检测者的临床信息输入第一神经网络模型,由第一神经网络模型自动识别肺炎的类型,在考虑肺炎征象等病
理性特征的同时结合被检测者的临床信息,从而更加准确的识别出肺炎的类型,不仅能够
实现自动区分肺炎类型,并且能够保证其准确性,从而为后续的治疗提供更为准确和细化
的类型信息,保证后续治疗更有针对性,也更有效果。
[0044] 图2是本申请一示例性实施例提供的一种肺炎征象的分割方法的流程示意图。如图2所示,该方法包括如下步骤:
[0045] 步骤210:基于CT图像中的肺部区域图像,分别生成多个肺部征象图像;其中,分别生成多个肺部征象图像的方式包括:将肺部区域图像分别输入多个第二神经网络模型,得
到多个肺部征象图像。
[0046] CT图像的检测是较为复杂的,其效率不高,并且由于肺部征象包括多个,需要在获知所有的或者多个征象后才能综合判断是否患有肺炎以及患病的程度,而这多个征象中有
些征象的获取难度较大,这也进一步增加了CT图像检测的难度。因此,本申请实施例中通过
将肺部区域图像分别输入多个第二神经网络模型,针对不同的肺部征象训练得到不同的第
二神经网络模型,可以有针对性的得到精度较高的各个肺部征象图像,从而为后续肺炎的
甄别提供了准确的数据依据。
[0047] 在一实施例中,肺部征象图像可以包括如下征象图像中的任一种或多种的组合:肺实变图像、磨玻璃影图像、肿块图像、树芽征图像、结节图像、空洞图像、晕征图像。肺实变
是指终末细支气管远侧的含气腔隙被病理性液体、细胞、组织所代替,其最主要的特点是病
变区致密,血管不能显影。磨玻璃影是指各种原因引起的肺泡充填或间质增厚,导致肺密度
轻度增高,但其内仍可见血管纹理的病变阴影。肿块是指团块状密度增高影,其最大直径≧
3cm。结节是指结节状密度增高影,其最大直径<3cm。空洞是指肺内病变坏死、液化,经引流
支气管排除及气体进入而形成的透亮区,对于感染性疾病,空洞临床上会倾向于化脓性感
染。树芽征是指由终末细支气管和肺泡腔内病变形成的小结节影与分支细线影构成的酷似
春天的树枝发芽状,多在肺外围支气管末梢呈2‑4mm大小结节与树枝状的高密度影。晕征是
指结节/空洞周围环绕的类环形玻璃样密度影,通常代表渗出、出血或水肿。可以根据各个
征象的不同特征设置不同的第二神经网络模型来分别分割,以提高整体的分割精度。
[0048] 在一实施例中,第二神经网络模型可以是深度学习神经网络模型,优选地,该第二神经网络模型可以是Unet神经网络模型。在一实施例中,第二神经网络模型在训练方式可
以是:选取已经由专业医务人员分割并标注出肺炎征象的肺部区域图像作为第二神经网络
模型的训练样本来训练该第二神经网络模型;并且第二神经网络模型在分割过程中得到的
分割结果也可以由第三方检测机构进行验证和修改,并且可以将修改后的结果作为样本再
次训练第二神经网络模型,从而进一步提高第二神经网络模型的分割精度。应当理解,本申
请实施例中的多个第二神经网络模型可以是一个神经网络模型,也可以是多个神经网络模
型,且多个第二神经网络模型的类型可以相同,也可以不同,本申请实施例对于分割各个肺
部征象的第二神经网络模型的具体类型不做限定。
[0049] 步骤220:将多个肺部征象图像组合,得到肺炎征象图像。
[0050] 通常肺炎的确定是基于多个肺部征象综合判断的,例如当只存在结节图像而不存在其他肺部征象时,是不能确定被检测者为肺炎患者的,因此,在分别得到多个肺部征象图
像(通常是在CT图像中标注出各个肺部征象的区域)后,将多个肺部征象图像综合起来确定
是否为肺炎,并且在确定肺炎后将相关的肺部征象组合得到肺炎征象图像(即肺炎征象只
是肺部征象中能够确定肺炎的部分),以方便医务人员或者其他的检测机构根据该肺炎综
合征象图像准确判断被检测者是否为肺炎患者。
[0051] 图3是本申请另一示例性实施例提供的一种肺炎征象的分割方法的流程示意图。肺部区域图像包括多层二维图像,如图3所示,步骤210可以具体包括如下子步骤:
[0052] 步骤211:逐次将多层二维图像中的一部分分别输入多个第二神经网络模型,或者将多层二维图像整体分别输入多个第二神经网络模型,得到分别对应多个肺部征象图像的
多层二维征象图像。
[0053] 二维图像的分割要比三维图像的分割难度小、速度快,而CT图像是包括多层二维图像的,CT图像中的肺部区域图像也是包括多层二维图像的,因此,为了提高分割的效率,
可以将肺部区域图像的多层二维图像分为多个部分,将这多个部分以多次输入的方式输入
多个第二神经网络模型,或者是将肺部区域图像的多层二维图像作为一个整体分别输入多
个第二神经网络模型,由多个第二神经网络模型分别多次分割二维图像来得到对应的多层
二维征象图像,从而提高分割效率。应当理解,本申请实施例可以根据神经网络或处理机器
的处理能力适当选取单次输入第二神经网络模型的二维图像的层数,可以是一层,也可以
是多层,还可以是将所有的二维图像单次输入第二神经网络模型,只要所选取的层数不超
过第二神经网络模型或处理机器所能承载的负荷即可,本申请实施例对于单次输入第二神
经网络模型的二维图像的具体层数不做限定。
[0054] 步骤212:分别将对应同一肺部征象图像的多层二维征象图像叠加,得到多个肺部征象图像。
[0055] 在得到每个肺部征象的多层二维征象图像之后,将同一肺部征象图像的多层二维征象图像叠加起来得到该肺部征象图像。在一实施例中,相邻次输入第二神经网络模型的
部分二维图像之间存在交叉部分。通过设置交叉部分,可以避免边缘二维图像之间的差异
较大,而且可以通过交叉部分的定位更好的实现叠加。
[0056] 图4是本申请另一示例性实施例提供的一种肺炎征象的分割方法的流程示意图。如图4所示,在步骤212之后,上述实施例还可以包括:
[0057] 步骤213:对多个肺部征象图像分别进行腐蚀膨胀操作。
[0058] 腐蚀操作为形态学操作,其具体操作过程为:沿着图像中物体边界移除像素并缩小物体的大小,即缩小物体的边界以去除图像中物体的噪声。膨胀操作也是形态学操作,其
具体操作过程与腐蚀操作正好相反,即沿着图像中物体边界增加像素并扩大物体的大小。
通过腐蚀膨胀操作,可以有效去除分割过程中产生的噪声,同时由于相邻的二维征象图像
之间是存在相互关联的,通过对叠加后的肺部征象图像进行腐蚀膨胀操作,可以利用相邻
的二维征象图像之间的相互关联性,可以去除个别层的分割误差,例如通过上下两层或多
层二维征象图像可以调整中间层的二维征象图像,从而提高肺部征象图像整体的分割精
度。
[0059] 图5是本申请一示例性实施例提供的一种肺部区域图像分割方法的流程示意图。如图5所示,该方法包括如下步骤:
[0060] 步骤510:获取CT图像中的肋骨区域图像。
[0061] 由于肋骨是紧紧包裹肺部区域的,并且肺炎患者的肺部形状和部分区域的特性会影响到CT图像的成像,而肺炎患者的肋骨是不会因为患病而发生变化的,因此,可以通过获
取CT图像中的肋骨区域来得到肺部区域的外边界,从而提高分割肺部区域的精度。
[0062] 步骤520:获取CT图像中肺部区域的粗分割图像。
[0063] 在一实施例中,步骤520的具体实现方式可以为:将CT图像输入第三神经网络模型,得到肺部区域的粗分割图像。通训练好的第三神经网络模型,可以由第三神经网络模型
识别CT图像中的肺部区域,其中第三神经网络模型可以是Unet网络等神经网络模型,并且
第三神经网络模型在训练方式可以是:选取已经由专业医务人员识别并标注出肺部区域的
CT图像作为第三神经网络模型的训练样本来训练该第三神经网络模型。由于该步骤中仅仅
是获取CT图像中肺部区域的粗分割图像,并非肺部区域的准确分割图像,因此,可以选取适
当数量的训练样本来训练该第三神经网络模型,从而提高整个肺部分割的效率。
[0064] 在另一实施例中,步骤520的具体实现方式还可以为:根据肺部区域的CT值,选取CT值在肺部区域的CT值范围内的区域作为粗分割图像。CT值是测定人体某一局部组织或器
官密度大小的一种计量单位,通常称亨氏单位(hounsfield unit,HU),其中,空气的CT值
为‑1000,致密骨的CT值为+1000。实际上CT值是CT图像中各组织与X线衰减系数相当的对应
值,CT值不是绝对不变的数值,它不仅与人体内在因素如呼吸、血流等有关,而且与X线管电
压、CT装置、室内温度等外界因素有关。人体组织中除了骨骼以为,其他组织的CT值都在300
以下且在‑80以上,其中钙化点的CT值为80‑300、脂肪的CT值为‑20—‑80。由于肺部区域内
基本为空气,其CT值相对其他组织较低,因此可以设定CT值范围,选取CT值在该CT值范围内
的连通区域作为肺部区域的粗分割图像。
[0065] 步骤530:以肋骨区域图像为肺部区域的边界,并且以粗分割图像为种子区域,以预设的步长向周围扩张至肺部区域的边界,得到肺部区域图像。
[0066] 在一实施例中,步骤530的具体实现方式可以是:以肋骨区域图像为边界、粗分割图像为感兴趣区域,并通过活动轮廓模型、以预设的步长对CT图像进行分割,以得到肺部区
域图像。由于肺部是被肋骨紧紧包裹的,即肋骨区域为肺部区域的外边界,因此,可以将粗
分割图像作为种子区域或者感兴趣区域,并且以肋骨区域图像作为边界,通过活动轮廓模
型、以预设的步长对CT图像进行分割,即由感兴趣区域开始、以预设的步长向周围扩张,直
至扩张到肋骨区域为止,以得到精确分割的肺部区域的图像,为后续的肺叶分割、肺炎判断
等提供了准确的基础图像数据。其中,预设的步长可以根据实际需求而调整,为了得到更高
的精度,可以适当减小预设的步长。在进一步的实施例中,活动轮廓模型可以包括LevelSet
模型或Snake模型。应当理解,本申请实施例可以根据实际应用场景的需求而选取不同的活
动轮廓模型,只要所选取的活动轮廓模型可以以肋骨区域图像为边界、粗分割图像为种子
区域得到精确的肺部区域的图像即可,本申请实施例对于活动轮廓模型的具体结构不做限
定。
[0067] 图6是本申请另一示例性实施例提供的一种肺部区域分割方法的流程示意图。如图6所示,在步骤520之后,上述实施例还可以包括:
[0068] 步骤540:对粗分割图像进行腐蚀操作,得到腐蚀后的粗分割图像。
[0069] 由于肺部区域的粗分割图像通常不是准确的肺部区域图像,例如,粗分割图像中可能会包含肺部区域以外的其他区域图像,该其他区域图像即为粗分割图像中的噪声区
域,通过腐蚀操作可以将粗分割图像中的干扰噪声区域去除,以保证腐蚀后的粗分割图像
为肺部区域图像的一部分,而不包含肺部区域以外的区域图像。
[0070] 同时,步骤530调整为:以肋骨区域图像为肺部区域的边界,并且以腐蚀后的粗分割图像为种子区域,以预设的步长向周围扩张至肺部区域的边界,得到肺部区域图像。
[0071] 由于种子区域只需要是肺部区域的一部分即可,不需要是肺部区域的全部,因此,可以通过腐蚀操作来保证种子区域内只包含肺部区域,从而避免种子区域在扩张的过程中
融入更多的非肺部区域,并且种子区域在扩张过程中是不会去除已存在于该种子区域内的
区域的,因此,保证种子区域内只包含肺部区域是保证分割肺部区域的精度的前提条件。
[0072] 图7是本申请一示例性实施例提供的一种肋骨区域图像的获取方法的流程示意图。如图7所示,该获取方法可以包括如下步骤:
[0073] 步骤511:基于骨头的CT值,获取CT图像中骨头区域图像。
[0074] 根据CT图像中各个区域的CT值即可获取CT值最大的骨头区域图像。在一实施例中,可以基于骨头的CT值设定第一CT值阈值,获取CT图像中CT值大于或等于第一CT值阈值
的连通区域作为骨头区域图像。其中,第一CT值阈值小于骨头的CT值且大于其他组织的CT
值,通过设定第一CT值阈值,获取CT图像中CT值大于或等于第一CT值阈值的连通区域,即可
得到骨头区域图像。
[0075] 在一实施例中,在获取CT图像中CT值大于或等于第一CT值阈值的连通区域后,上述方法还可以包括:去除连通区域中面积小于预设的面积阈值的区域。第一CT值阈值设定
的过大时可能会遗漏部分骨头区域,而第一CT值阈值设定的过小时,由于钙化点的CT值较
大,又可能会出现肺部或者心脏区域存在一定的钙化点成为骨头区域图像中的干扰噪声,
因此,需要将其去除。通常钙化点的面积较小,因此,可以通过去除连通区域中面积小于预
设的面积阈值的区域来排出钙化点对骨头区域图像的干扰,其中面积阈值可以根据实际应
用而预先设定。
[0076] 在一实施例中,在获取CT图像中CT值大于或等于第一CT值阈值的连通区域后,上述方法还可以包括:去除位于粗分割图像内的连通区域。通过将粗分割图像内连通区域去
除,可以避免肺部或者心脏区域内的钙化点对最终的分割结果造成的影响,从而可以提高
后续的分割精度。
[0077] 步骤512:基于肋骨的特性,分割出骨头区域图像中的肋骨区域图像。
[0078] 在一实施例中,步骤512的实现方式可以是:将标准肋骨图像与骨头区域图像进行比对,选取骨头区域图像中与标准肋骨图像的相似度大于预设相似度的骨头区域作为肋骨
区域图像。由于肋骨相对其他骨头比较规则,肋骨通常是规则的排列在肺部外侧且呈现一
定的弧形且为左右对称结构,通过多平面重建的三维视图中可以区分出肋骨与其他骨头的
区别,特别是在矢状位上,可以清晰获知肋骨的上述特性,即肋骨的排列和形状有其特殊
性,因此,可以通过标准的肋骨图像去比对,选取骨头区域图像中与该标准肋骨图像的相似
度满足一定要求(大于预设相似度)的骨头区域,以分割出骨头区域图像中的肋骨区域图
像。应当理解,本申请实施例也可以根据实际应用场景的需求而选取其他获取肋骨区域图
像的方式,例如可以根据肋骨的弧度是否在预设弧度范围内来判断,也可以根据肋骨之间
的间隙是否在预设距离范围内(因为肋骨的排列有一定的规则,相邻的肋骨之间各处的垂
直距离都在一定的范围内),还可以直接通过神经网络模型来获取肋骨区域图像,只要所选
取的获取肋骨区域图像的方式满足精度需求即可,本申请实施例对于获取肋骨区域图像的
具体方式不做限定。
[0079] 图8是本申请另一示例性实施例提供的一种肺部区域分割方法的流程示意图。如图8所示,在步骤520之前,上述实施例还可以包括:
[0080] 步骤550:对CT图像进行预处理。
[0081] 在一实施例中,预处理可以包括以下操作中任一项或多项的组合:去除背景、去除白噪声、裁剪图像、变换窗宽和窗位。其中,去除背景的具体实现方式可以是:通过设置CT值
范围,获取该CT值范围内的连通区域,并且只保留连通区域内面积最大的连通区域,其他区
域均设置为背景区域,从而排除了其他区域的干扰。去除白噪声的具体实现方式可以是:通
过高斯滤波器去除拍摄CT图像过程中引起的白噪声。裁剪图像的具体实现方式可以是:将
背景去除,只保留有效区域,以降低后续图像处理的复杂度。变换窗宽和窗位的具体实现方
式可以是:通过设定窗宽和窗位的值来重点突出感兴趣区域,从而避免不感兴趣的区域对
后续处理的干扰,在本申请实施例中,可以选取窗位为‑500、窗宽为1500,当然应当理解,窗
位和窗宽的设定值可以根据实际情况而调整。
[0082] 应当理解,步骤550可以设置于步骤510之前,通过预处理将CT图像中的背景和其他干扰因素都排出,可以有效降低后续步骤的复杂程度,提供肺部分割的效率。
[0083] 图9是本申请另一示例性实施例提供的一种肺部分区域割方法的流程示意图。如图9所示,在步骤530之后,上述实施例还可以包括:
[0084] 步骤560:对肺部区域图像的边界进行光滑化处理。
[0085] 由于根据肋骨区域图像只能确定肺部区域的部分边界,并且是以同一预设的步长通过活动轮廓模型扩张,因而得到的肺部区域图像的边界可能不光滑,在得到肺部区域图
像后,对该肺部区域图像的边界进行光滑化处理,可以得到更为精确的肺部区域图像。
[0086] 示例性装置
[0087] 图10是本申请一示例性实施例提供的一种肺炎分类装置的结构示意图。如图10所示,该肺炎分类装置90包括如下模块:
[0088] 肺炎征象获取模块91,用于获取CT图像中肺部区域的肺炎征象图像;临床信息获取模块92,用于获取CT图像对应的被检测者的临床信息;以及肺炎类型获取模块93,用于根
据肺炎征象图像和临床信息,综合得到被检测者的肺炎类型;其中,肺炎类型获取模块93进
一步配置为:将肺炎征象图像和临床信息输入第一神经网络模型,得到被检测者的肺炎类
型。
[0089] 本申请提出的肺炎分类装置,通过肺炎征象获取模块91获取CT图像中肺部区域的肺炎征象图像、临床信息获取模块92获取CT图像对应的被检测者的临床信息,肺炎类型获
取模块93将获取的肺炎征象和被检测者的临床信息输入第一神经网络模型,由第一神经网
络模型自动识别肺炎的类型,在考虑肺炎征象等病理性特征的同时结合被检测者的临床信
息,从而更加准确的识别出肺炎的类型,不仅能够实现自动区分肺炎类型,并且能够保证其
准确性,从而为后续的治疗提供更为准确和细化的类型信息,保证后续治疗更有针对性,也
更有效果。
[0090] 在一实施例中,临床信息包括以下信息中的一种或多种的组合:体温信息、咳嗽症状信息、病史信息等信息。
[0091] 图11是本申请另一示例性实施例提供的一种肺炎分类装置的结构示意图。如图11所示,该肺炎征象获取模块91可以包括:生成子模块911,用于基于CT图像中的肺部区域图
像,分别生成多个肺部征象图像;以及组合子模块912,用于将多个肺部征象图像组合,得到
肺炎征象图像;其中,生成子模块911进一步配置为:将肺部区域图像分别输入多个第二神
经网络模型,得到多个肺部征象图像。
[0092] 在一实施例中,肺部征象图像可以包括如下征象图像中的任一种或多种的组合:肺实变图像、磨玻璃影图像、肿块图像、树芽征图像、结节图像、空洞图像、晕征图像。在一实
施例中,第二神经网络模型可以是深度学习神经网络模型,优选地,第二神经网络模型可以
是Unet神经网络模型。
[0093] 在一实施例中,如图11所示,生成子模块911可以包括如下单元:输入单元9111,用于逐次将多层二维图像中的一部分输入多个第二神经网络模型,得到分别对应多个肺部征
象图像的多层二维征象图像;叠加单元9112,用于分别将对应同一肺部征象图像的多层二
维征象图像叠加,得到多个肺部征象图像。
[0094] 在一实施例中,如图11所示,生成子模块911还可以包括:后处理单元9113,用于对多个肺部征象图像分别进行腐蚀膨胀操作。
[0095] 在一实施例中,如图11所示,肺炎分类装置90还可以包括:肋骨获取模块94,用于获取CT图像中的肋骨区域图像;粗分割模块95,用于获取CT图像中肺部区域的粗分割图像;
以及精分割模块96,用于以肋骨区域图像为肺部区域的边界,并且以粗分割图像为种子区
域,以预设的步长向周围扩张至所述肺部区域的边界,得到肺部区域图像。
[0096] 在一实施例中,粗分割模块95可以进一步配置为:将CT图像输入第三神经网络模型,得到肺部区域的粗分割图像。
[0097] 在一实施例中,粗分割模块95可以进一步配置为:根据肺部区域的CT值,选取CT值在肺部区域的CT值范围内的区域作为粗分割图像。
[0098] 在一实施例中,精分割模块96可以进一步配置为:以肋骨区域图像为边界、粗分割图像为感兴趣区域,并通过活动轮廓模型、以预设的步长对CT图像进行分割,以得到肺部区
域图像。其中,活动轮廓模型可以包括LevelSet模型或Snake模型。
[0099] 在一实施例中,如图11所示,该肺炎分类装置90还可以包括:腐蚀模块97,用于对粗分割图像进行腐蚀操作,得到腐蚀后的粗分割图像。且精分割模块96配置为:以肋骨区域
图像为肺部区域的边界,并且以腐蚀后的粗分割图像为种子区域,以预设的步长向周围扩
张至肺部区域的边界,得到肺部区域图像。
[0100] 在一实施例中,如图11所示,肋骨获取模块94可以包括:骨头获取单元941,用于基于骨头的CT值,获取CT图像中骨头区域图像;肋骨获取单元942,用于基于肋骨的特性,分割
出骨头区域图像中的肋骨区域图像。
[0101] 在一实施例中,骨头获取单元941可以进一步配置为:基于骨头的CT值设定第一CT值阈值,获取CT图像中CT值大于或等于第一CT值阈值的连通区域作为骨头区域图像。
[0102] 在一实施例中,肋骨获取模块94可以进一步配置为:在获取CT图像中CT值大于或等于第一CT值阈值的连通区域后,去除连通区域中面积小于预设的面积阈值的区域。
[0103] 在一实施例中,肋骨获取模块94可以进一步配置为:在获取CT图像中CT值大于或等于第一CT值阈值的连通区域后,去除位于粗分割图像内的连通区域。
[0104] 在一实施例中,肋骨获取单元942可以进一步配置为:将标准肋骨图像与骨头区域图像进行比对,选取骨头区域图像中与标准肋骨图像的相似度大于预设相似度的骨头区域
作为肋骨区域图像。
[0105] 在一实施例中,如图11所示,该肺炎分类装置90还可以包括:预处理模块98,用于对CT图像进行预处理。在一实施例中,预处理可以包括以下操作中任一项或多项的组合:去
除背景、去除白噪声、裁剪图像、变换窗宽和窗位。
[0106] 在一实施例中,如图11所示,该肺炎分类装置90还可以包括:光滑化模块99,用于对肺部区域图像的边界进行光滑化处理。
[0107] 示例性电子设备
[0108] 下面,参考图12来描述根据本申请实施例的电子设备。该电子设备可以是第一设备和第二设备中的任一个或两者、或与它们独立的单机设备,该单机设备可以与第一设备
和第二设备进行通信,以从它们接收所采集到的输入信号。
[0109] 图12图示了根据本申请实施例的电子设备的框图。
[0110] 如图12所示,电子设备10包括一个或多个处理器11和存储器12。
[0111] 处理器11可以是中央处理单元(CPU)或者具有数据处理能力和/或指令执行能力的其他形式的处理单元,并且可以控制电子设备10中的其他组件以执行期望的功能。
[0112] 存储器12可以包括一个或多个计算机程序产品,所述计算机程序产品可以包括各种形式的计算机可读存储介质,例如易失性存储器和/或非易失性存储器。所述易失性存储
器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存
储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存
储一个或多个计算机程序指令,处理器11可以运行所述程序指令,以实现上文所述的本申
请的各个实施例的肺炎分类方法以及/或者其他期望的功能。在所述计算机可读存储介质
中还可以存储诸如输入信号、信号分量、噪声分量等各种内容。
[0113] 在一个示例中,电子设备10还可以包括:输入装置13和输出装置14,这些组件通过总线系统和/或其他形式的连接机构(未示出)互连。
[0114] 例如,在该电子设备是第一设备或第二设备时,该输入装置13可以是摄像头,用于捕捉图像的输入信号。在该电子设备是单机设备时,该输入装置13可以是通信网络连接器,
用于从第一设备和第二设备接收所采集的输入信号。
[0115] 此外,该输入设备13还可以包括例如键盘、鼠标等等。
[0116] 该输出装置14可以向外部输出各种信息,包括确定出的距离信息、方向信息等。该输出设备14可以包括例如显示器、扬声器、打印机、以及通信网络及其所连接的远程输出设
备等等。
[0117] 当然,为了简化,图12中仅示出了该电子设备10中与本申请有关的组件中的一些,省略了诸如总线、输入/输出接口等等的组件。除此之外,根据具体应用情况,电子设备10还
可以包括任何其他适当的组件。
[0118] 示例性计算机程序产品和计算机可读存储介质
[0119] 除了上述方法和设备以外,本申请的实施例还可以是计算机程序产品,其包括计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述
“示例性方法”部分中描述的根据本申请各种实施例的肺炎分类方法中的步骤。
[0120] 所述计算机程序产品可以以一种或多种程序设计语言的任意组合来编写用于执行本申请实施例操作的程序代码,所述程序设计语言包括面向对象的程序设计语言,诸如
Java、C++等,还包括常规的过程式程序设计语言,诸如“C”语言或类似的程序设计语言。程
序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软
件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备
或服务器上执行。
[0121] 此外,本申请的实施例还可以是计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述“示例性方
法”部分中描述的根据本申请各种实施例的肺炎分类方法中的步骤。
[0122] 所述计算机可读存储介质可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以包括但不限于电、磁、光、电
磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的
例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储
器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘
只读存储器(CD‑ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
[0123] 以上结合具体实施例描述了本申请的基本原理,但是,需要指出的是,在本申请中提及的优点、优势、效果等仅是示例而非限制,不能认为这些优点、优势、效果等是本申请的
各个实施例必须具备的。另外,上述公开的具体细节仅是为了示例的作用和便于理解的作
用,而非限制,上述细节并不限制本申请为必须采用上述具体的细节来实现。
[0124] 本申请中涉及的器件、装置、设备、系统的方框图仅作为例示性的例子并且不意图要求或暗示必须按照方框图示出的方式进行连接、布置、配置。如本领域技术人员将认识到
的,可以按任意方式连接、布置、配置这些器件、装置、设备、系统。诸如“包括”、“包含”、“具
有”等等的词语是开放性词汇,指“包括但不限于”,且可与其互换使用。这里所使用的词汇
“或”和“和”指词汇“和/或”,且可与其互换使用,除非上下文明确指示不是如此。这里所使
用的词汇“诸如”指词组“诸如但不限于”,且可与其互换使用。
[0125] 还需要指出的是,在本申请的装置、设备和方法中,各部件或各步骤是可以分解和/或重新组合的。这些分解和/或重新组合应视为本申请的等效方案。
[0126] 提供所公开的方面的以上描述以使本领域的任何技术人员能够做出或者使用本申请。对这些方面的各种修改对于本领域技术人员而言是非常显而易见的,并且在此定义
的一般原理可以应用于其他方面而不脱离本申请的范围。因此,本申请不意图被限制到在
此示出的方面,而是按照与在此公开的原理和新颖的特征一致的最宽范围。
[0127] 为了例示和描述的目的已经给出了以上描述。此外,此描述不意图将本申请的实施例限制到在此公开的形式。尽管以上已经讨论了多个示例方面和实施例,但是本领域技
术人员将认识到其某些变型、修改、改变、添加和子组合。