一种深度学习模型的子宫内膜癌全幻灯片图像检测系统的制作方法

1.本发明涉及智能模型图像检测系统技术领域，更具体地说，本发明涉及一种深度学习模型的子宫内膜癌全幻灯片图像检测系统。


背景技术：

2.在临床工作中，病理诊断是子宫内膜癌评估的金标准；子宫内膜癌ec是在世界范围内发病率和死亡率都在不断上升；只有病理做出准确的诊断，才会给出下一步的治疗建议，这导致对病理医生的需求过多，病理医生短缺在中国和全球都存在，病理医生的超负荷工作，会进一步影响了诊断的准确性；子宫内膜癌ec由于日常诊断需求巨大，并且宫腔刮除术或活检获得的标本往往是碎片化的、含有血液甚至宫颈粘液，增加了诊断的复杂性；这些情况对病理诊断造成了相当大的压力；诊断的复杂性和病理医生的缺乏之间构成了一个显著的矛盾；研究如何找到新技术，使病理医生能够专注于感兴趣的区域rois是值得的；近年来，人工智能有了巨大的发展，将这一前沿技术应用于病理领域应用于多种器官的病理诊断，可以作为一种筛查工具，提前标记出疑似恶性病变区域；从而提高了诊断准确性，缩短诊断时间；关于深度学习应用于使用全幻灯片图像wsis进行ec识别，如何通过卷积神经网络cnn来解释子宫内膜标本的苏木精和伊红h&e染色图像斑块、如何对斑块级别的病理图像进行分类，并使用回顾性收集的病例进行模型评估等问题尚待解决；因此，有必要提出一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，以至少部分地解决现有技术中存在的问题。


技术实现要素：

3.在发明内容部分中引入了一系列简化形式的概念，这将在具体实施方式部分中进一步详细说明；本发明的发明内容部分并不意味着要试图限定出所要求保护的技术方案的关键特征和必要技术特征，更不意味着试图确定所要求保护的技术方案的保护范围。
4.为至少部分地解决上述问题，本发明提供了一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，包括：
5.幻灯片数字化图像分类模块，扫描子宫内膜幻灯片获取数字化幻灯片图像；对数字化幻灯片图像根据肿瘤分类标准进行分类，获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；
6.网格搜索病理斑块提取模块，对数字化幻灯片图像进行网格搜索，提取有效组织面积，并分块获取数字图像小块；从数字图像小块的有效组织面积中并排非重叠提取数字病理斑块；
7.深度学习模型优化训练模块，对数字病理斑块使用atrous空间金字塔池化，使模型聚焦于肿瘤细胞；通过自适应矩估计优化器对深度学习模型进行优化，进行数字化幻灯片图像训练集数据训练，获取全卷积神经网络深度学习模型；
8.模型评估全幻灯片图像检测模块，通过逻辑运算脚本计算统计数据，评估全卷积
神经网络深度学习模型性能，进行子宫内膜癌全幻灯片图像检测。
9.优选的，所述幻灯片数字化图像分类模块包括：
10.自动缩放数字扫描子模块，通过自动缩放数字幻灯片扫描装置扫描子宫内膜幻灯片获取数字化幻灯片图像；
11.肿瘤标准训练集合子模块，根据肿瘤分类标准，对数字化幻灯片图像进行分类，获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；将数字化幻灯片图像测试集根据数据来源进行分类，获取幻灯片图像回顾性测试集和幻灯片图像前瞻性测试集；
12.多头显微配合标定子模块，通过多头显微镜数据配合标定，获取数字化幻灯片图像测试集中所有病例的金标准诊断数据。
13.优选的，所述网格搜索病理斑块提取模块包括：
14.灰度缩略图处理子模块，通过缩略图处理，获取数字化幻灯片图像缩略图；
15.阈值参数网格搜索子模块，在数字化幻灯片图像缩略图上，对阈值参数进行网格搜索，提取有效组织面积；
16.数字病理斑块提取子模块，将数字化幻灯片图像分成320
×
320像素的数字图像小块；从数字图像小块的有效组织面积中并排非重叠提取数字病理斑块；数字病理斑块包括：数字病理恶性斑块及数字病理良性斑块；数字病理恶性斑块数量为891330个；数字病理良性斑块数量为1983966个。
17.优选的，所述深度学习模型优化训练模块包括：
18.模型聚焦肿瘤细胞子模块，对数字病理斑块使用atrous空间金字塔池化，并去除图像级池化信息，使模型聚焦于肿瘤细胞；
19.数字病理斑块增强子模块，对数字病理斑块亮度、数字病理斑块对比度、数字病理斑块色相和数字病理斑块饱和度进行随机化参数增强，获取数字病理斑块增强训练集；
20.矩估计优化模型训练子模块，通过自适应矩估计优化器对深度学习模型进行优化，获取矩估计优化深度学习模型；通过矩估计优化深度学习模型利用全卷积神经网络对数字病理斑块增强训练集进行数据训练，训练完成后获取全卷积神经网络深度学习模型。
21.优选的，所述模型评估全幻灯片图像检测模块包括：
22.评价指标逻辑运算子模块，设置模型训练性能评价指标；创建内部逻辑运算脚本，通过逻辑运算脚本计算统计数据；并使用自动绘图绘制训练曲线；
23.深度学习模型性能评估子模块，评估全卷积神经网络深度学习模型性能，评估成功预测的幻灯片相对于幻灯片总数的准确度比例；评估正确识别的肿瘤与正常切片的百分比；获取全卷积神经网络深度学习模型评估结果；
24.评估判定调优检测子模块，对全卷积神经网络深度学习模型评估结果进行判定，反馈判定信息进行模型训练过程参数持续调优，进行子宫内膜癌全幻灯片图像检测。
25.优选的，所述肿瘤标准训练集合子模块包括：
26.肿瘤分类信息收集单元，通过数据收集肿瘤分类标准信息，获取肿瘤分类标准；
27.幻灯片图像分类单元，根据肿瘤分类标准，对数字化幻灯片图像进行分类；获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；
28.测试集来源分类单元，通过数据源分析划分数据来源，将数字化幻灯片图像测试
集根据数据来源进行分类，获取幻灯片图像回顾性测试集和幻灯片图像前瞻性测试集。
29.优选的，所述模型聚焦肿瘤细胞子模块包括：
30.空间金字塔池化单元，对接deeplab v3和resnet-50，采用atrous空间金字塔池化，对多尺度扩张的模型进行多尺度检测；
31.池化信息去除单元，从atrous空间金字塔池化中去除图像级池化信息，使模型聚焦于肿瘤细胞。
32.优选的，所述矩估计优化模型训练子模块包括：
33.端到端机器学习单元，在模型训练服务器上使用端到端机器学习平台进行训练和评估，模型训练服务器具有多核gpu运算处理器；
34.所述端到端机器学习平台包括：数字病理斑块分类层、数字病理斑块相似度计算层及数字病理斑块筛选层；接收所述模型训练服务器上传的用于进行机器学习模型训练的数据样本和所述机器学习模型的目标功能，所述目标功能包括：数字病理斑块分类、数字病理斑块相似度计算及数字病理斑块筛选；
35.多核gpu运算处理单元，通过多核gpu运算处理器，运行自适应矩估计优化器对深度学习模型进行优化，获取矩估计优化深度学习模型；
36.全卷积病理数据训练单元，通过矩估计优化深度学习模型利用全卷积神经网络对数字病理斑块增强训练集进行数据训练，训练完成后获取全卷积神经网络深度学习模型。
37.优选的，所述深度学习模型性能评估子模块包括：
38.完全连接层去除单元，利用全卷积神经网络，去除完全连接层；通过矩估计优化深度学习模型利用全卷积神经网络对数字病理斑块增强训练集进行数据训练；
39.数据训练推断单元，在数据训练推断阶段，将数字化幻灯片图像中的wsi全视野数字切片划分为2000
×
2000像素的数字图像小块进行训练推断；输入2200
×
2200-pixel贴图来进行重叠补丁；选取中间2000
×
2000-pixel区域进行最终预测；
40.深度学习最终预测单元，通过滑动阈值法进行roc曲线概率构造；使用第1000个最高像素级概率作为幻灯片级ec概率；模型最终预测2000
×
2000像素的ec概率。
41.优选的，所述评估判定调优检测子模块包括：
42.评估判定持续调优单元，对全卷积神经网络深度学习模型评估结果进行判定，判定模型训练性能评价指标的模型准确性参数、模型敏感性参数及模型特异性参数；当成功预测的幻灯片相对于幻灯片总数的准确度比例未达到预期准确度比例时或正确识别的肿瘤与正常切片的百分比未达到预期正确百分比时；反馈判定信息进行模型训练过程参数持续调优；
43.训练评估验证单元，通过模型训练过程参数持续调优，直至成功预测的幻灯片相对于幻灯片总数的准确度比例达到预期准确度比例时，或正确识别的肿瘤与正常切片的百分比达到预期正确百分比时，训练评估验证集验证完成；
44.模型测试幻灯片检测单元，验证集验证完成后，进行数字化幻灯片图像测试集数据的测试；当幻灯片图像回顾性测试集的回顾性测试集准确性参数、回顾性测试集敏感性参数及回顾性测试集特异性参数，均超过设定回顾性测试集标准参数；或者，当幻灯片图像前瞻性测试集的前瞻性测试集准确性参数、前瞻性测试集敏感性参数及前瞻性测试集特异性参数，均超过设定前瞻性测试集标准参数；数字化幻灯片图像测试集数据的测试完成；进
行子宫内膜癌全幻灯片图像检测。
45.相比现有技术，本发明至少包括以下有益效果：
46.本发明提供了一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，通过幻灯片数字化图像分类模块，扫描子宫内膜幻灯片获取数字化幻灯片图像；对数字化幻灯片图像根据肿瘤分类标准进行分类，获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；网格搜索病理斑块提取模块，对数字化幻灯片图像进行网格搜索，提取有效组织面积，并分块获取数字图像小块；从数字图像小块的有效组织面积中并排非重叠提取数字病理斑块；深度学习模型优化训练模块，对数字病理斑块使用atrous空间金字塔池化，使模型聚焦于肿瘤细胞；通过自适应矩估计优化器对深度学习模型进行优化，进行数字化幻灯片图像训练集数据训练，获取全卷积神经网络深度学习模型；模型评估全幻灯片图像检测模块，通过逻辑运算脚本计算统计数据，评估全卷积神经网络深度学习模型性能，进行子宫内膜癌全幻灯片图像检测；该模型在1190个wsis上对子宫内膜癌和非癌组织进行分类时，在auc、灵敏度和特异性分别为0.928、0.924和0.801；在两家医院的回顾性数据集上，该模型的auc、灵敏度和特异性分别为0.948/0.971、0.928/0.947和0.80/0.938；在前瞻性数据集上，auc、敏感性和特异性依次为0.933、0.934和0.837；能够对预测结果进行深入分析，大幅提高预测准确度；可显著提高诊断模型的精准度；该深度学习模型在使用wsis识别子宫内膜癌时能达到特别高的准确度；通过对可疑子宫内膜癌区域的预筛查，可显著提高病理诊断工作效率。
47.本发明所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，本发明的其它优点、目标和特征将部分通过下面的说明体现，部分还将通过对本发明的研究和实践而为本领域的技术人员所理解。
附图说明
48.附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
49.图1为本发明所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统框架图。
50.图2为本发明所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统一个实施例图。
51.图3为本发明所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统另一个实施例图。
52.图4为本发明所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统一个图像测试集数据的训练测试实施例图。
53.图5为本发明所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统另一个图像测试集数据的训练测试实施例图。
54.图6为本发明所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统数据训练判断一个实施例图。
55.图7为本发明所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统性能评估一个实施例图。
具体实施方式
56.下面结合附图以及实施例对本发明做进一步的详细说明，以令本领域技术人员参照说明书能够据以实施；如图1-图7所示，本发明提供了一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，包括：
57.幻灯片数字化图像分类模块，扫描子宫内膜幻灯片获取数字化幻灯片图像；对数字化幻灯片图像根据肿瘤分类标准进行分类，获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；
58.网格搜索病理斑块提取模块，对数字化幻灯片图像进行网格搜索，提取有效组织面积，并分块获取数字图像小块；从数字图像小块的有效组织面积中并排非重叠提取数字病理斑块；
59.深度学习模型优化训练模块，对数字病理斑块使用atrous空间金字塔池化，使模型聚焦于肿瘤细胞；通过自适应矩估计优化器对深度学习模型进行优化，进行数字化幻灯片图像训练集数据训练，获取全卷积神经网络深度学习模型；
60.模型评估全幻灯片图像检测模块，通过逻辑运算脚本计算统计数据，评估全卷积神经网络深度学习模型性能，进行子宫内膜癌全幻灯片图像检测。
61.上述技术方案的原理及效果为：本发明提供了一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，包括：幻灯片数字化图像分类模块，扫描子宫内膜幻灯片获取数字化幻灯片图像；对数字化幻灯片图像根据肿瘤分类标准进行分类，获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；网格搜索病理斑块提取模块，对数字化幻灯片图像进行网格搜索，提取有效组织面积，并分块获取数字图像小块；从数字图像小块的有效组织面积中并排非重叠提取数字病理斑块；深度学习模型优化训练模块，对数字病理斑块使用atrous空间金字塔池化，使模型聚焦于肿瘤细胞；通过自适应矩估计优化器对深度学习模型进行优化，进行数字化幻灯片图像训练集数据训练，获取全卷积神经网络深度学习模型；模型评估全幻灯片图像检测模块，通过逻辑运算脚本计算统计数据，评估全卷积神经网络深度学习模型性能，进行子宫内膜癌全幻灯片图像检测；该模型在1190个wsis上对子宫内膜癌和非癌组织进行分类时，在auc、灵敏度和特异性分别为0.928、0.924和0.801；在两家医院的回顾性数据集上，该模型的auc、灵敏度和特异性分别为0.948/0.971、0.928/0.947和0.80/0.938；在前瞻性数据集上，auc、敏感性和特异性依次为0.933、0.934和0.837；能够对预测结果进行深入分析，大幅提高预测准确度；可显著提高诊断模型的精准度；该深度学习模型在使用wsis识别子宫内膜癌时能达到特别高的准确度；通过对可疑子宫内膜癌区域的预筛查，可显著提高病理诊断工作效率。
62.在一个实施例中，所述幻灯片数字化图像分类模块包括：
63.自动缩放数字扫描子模块，通过自动缩放数字幻灯片扫描装置扫描子宫内膜幻灯片获取数字化幻灯片图像；
64.肿瘤标准训练集合子模块，根据肿瘤分类标准，对数字化幻灯片图像进行分类，获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；将数字化幻灯片图像测试集根据数据来源进行分类，获取幻灯片图像回顾性测试集和幻灯片图像前瞻性测试集；
65.多头显微配合标定子模块，通过多头显微镜数据配合标定，获取数字化幻灯片图
像测试集中所有病例的金标准诊断数据。
66.上述技术方案的原理及效果为：所述网格搜索病理斑块提取模块包括：自动缩放数字扫描子模块，通过自动缩放数字幻灯片扫描装置扫描子宫内膜幻灯片获取数字化幻灯片图像；肿瘤标准训练集合子模块，根据肿瘤分类标准，对数字化幻灯片图像进行分类，获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；将数字化幻灯片图像测试集根据数据来源进行分类，获取幻灯片图像回顾性测试集和幻灯片图像前瞻性测试集；多头显微配合标定子模块，通过多头显微镜数据配合标定，获取数字化幻灯片图像测试集中所有病例的金标准诊断数据；可以使数字化幻灯片图像测试集的诊断数据参照准度大幅提高。
67.在一个实施例中，所述网格搜索病理斑块提取模块包括：
68.灰度缩略图处理子模块，通过缩略图处理，获取数字化幻灯片图像缩略图；
69.阈值参数网格搜索子模块，在数字化幻灯片图像缩略图上，对阈值参数进行网格搜索，提取有效组织面积；
70.数字病理斑块提取子模块，将数字化幻灯片图像分成320
×
320像素的数字图像小块；从数字图像小块的有效组织面积中并排非重叠提取数字病理斑块；数字病理斑块包括：数字病理恶性斑块及数字病理良性斑块；数字病理恶性斑块数量为891330个；数字病理良性斑块数量为1983966个。
71.上述技术方案的原理及效果为：所述网格搜索病理斑块提取模块包括：灰度缩略图处理子模块，通过缩略图处理，获取数字化幻灯片图像缩略图；阈值参数网格搜索子模块，在数字化幻灯片图像缩略图上，对阈值参数进行网格搜索，提取有效组织面积；数字病理斑块提取子模块，将数字化幻灯片图像分成320
×
320像素的数字图像小块；从数字图像小块的有效组织面积中并排非重叠提取数字病理斑块；数字病理斑块包括：数字病理恶性斑块及数字病理良性斑块；数字病理恶性斑块数量为891330个；数字病理良性斑块数量为1983966个；能够对预测结果进行深入分析，大幅提高预测准确度。
72.在一个实施例中，所述深度学习模型优化训练模块包括：
73.模型聚焦肿瘤细胞子模块，对数字病理斑块使用atrous空间金字塔池化，并去除图像级池化信息，使模型聚焦于肿瘤细胞；
74.数字病理斑块增强子模块，对数字病理斑块亮度、数字病理斑块对比度、数字病理斑块色相和数字病理斑块饱和度进行随机化参数增强，获取数字病理斑块增强训练集；
75.矩估计优化模型训练子模块，通过自适应矩估计优化器对深度学习模型进行优化，获取矩估计优化深度学习模型；通过矩估计优化深度学习模型利用全卷积神经网络对数字病理斑块增强训练集进行数据训练，训练完成后获取全卷积神经网络深度学习模型。
76.上述技术方案的原理及效果为：所述深度学习模型优化训练模块包括：模型聚焦肿瘤细胞子模块，对数字病理斑块使用atrous空间金字塔池化，并去除图像级池化信息，使模型聚焦于肿瘤细胞；数字病理斑块增强子模块，对数字病理斑块亮度、数字病理斑块对比度、数字病理斑块色相和数字病理斑块饱和度进行随机化参数增强，获取数字病理斑块增强训练集；矩估计优化模型训练子模块，通过自适应矩估计优化器对深度学习模型进行优化，获取矩估计优化深度学习模型；通过矩估计优化深度学习模型利用全卷积神经网络对数字病理斑块增强训练集进行数据训练，训练完成后获取全卷积神经网络深度学习模型；
可显著提高诊断模型的精准度。
77.在一个实施例中，所述模型评估全幻灯片图像检测模块包括：
78.评价指标逻辑运算子模块，设置模型训练性能评价指标；创建内部逻辑运算脚本，通过逻辑运算脚本计算统计数据；并使用自动绘图绘制训练曲线；
79.深度学习模型性能评估子模块，评估全卷积神经网络深度学习模型性能，评估成功预测的幻灯片相对于幻灯片总数的准确度比例；评估正确识别的肿瘤与正常切片的百分比；获取全卷积神经网络深度学习模型评估结果；
80.评估判定调优检测子模块，对全卷积神经网络深度学习模型评估结果进行判定，反馈判定信息进行模型训练过程参数持续调优，进行子宫内膜癌全幻灯片图像检测。
81.上述技术方案的原理及效果为：所述模型评估全幻灯片图像检测模块包括：评价指标逻辑运算子模块，设置模型训练性能评价指标；创建内部逻辑运算脚本，通过逻辑运算脚本计算统计数据；并使用自动绘图绘制训练曲线；深度学习模型性能评估子模块，评估全卷积神经网络深度学习模型性能，评估成功预测的幻灯片相对于幻灯片总数的准确度比例；评估正确识别的肿瘤与正常切片的百分比；获取全卷积神经网络深度学习模型评估结果；评估判定调优检测子模块，对全卷积神经网络深度学习模型评估结果进行判定，反馈判定信息进行模型训练过程参数持续调优，进行子宫内膜癌全幻灯片图像检测；能达到特别高的准确度。
82.在一个实施例中，所述肿瘤标准训练集合子模块包括：
83.肿瘤分类信息收集单元，通过数据收集肿瘤分类标准信息，获取肿瘤分类标准；
84.幻灯片图像分类单元，根据肿瘤分类标准，对数字化幻灯片图像进行分类；获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；
85.测试集来源分类单元，通过数据源分析划分数据来源，将数字化幻灯片图像测试集根据数据来源进行分类，获取幻灯片图像回顾性测试集和幻灯片图像前瞻性测试集。
86.上述技术方案的原理及效果为：所述肿瘤标准训练集合子模块包括：肿瘤分类信息收集单元，通过数据收集肿瘤分类标准信息，获取肿瘤分类标准；幻灯片图像分类单元，根据肿瘤分类标准，对数字化幻灯片图像进行分类；获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；测试集来源分类单元，通过数据源分析划分数据来源，将数字化幻灯片图像测试集根据数据来源进行分类，获取幻灯片图像回顾性测试集和幻灯片图像前瞻性测试集；幻灯片图像分类更详细，数据集数据来源信息更全面。
87.在一个实施例中，所述模型聚焦肿瘤细胞子模块包括：
88.空间金字塔池化单元，对接deeplab v3和resnet-50，采用atrous空间金字塔池化，对多尺度扩张的模型进行多尺度检测；
89.池化信息去除单元，从atrous空间金字塔池化中去除图像级池化信息，使模型聚焦于肿瘤细胞。
90.上述技术方案的原理及效果为：所述模型聚焦肿瘤细胞子模块包括：空间金字塔池化单元，对接deeplab v3和resnet-50，采用atrous空间金字塔池化，对多尺度扩张的模型进行多尺度检测；池化信息去除单元，从atrous空间金字塔池化中去除图像级池化信息，使模型聚焦于肿瘤细胞；能够大幅提高模型效率和精准度。
91.在一个实施例中，所述矩估计优化模型训练子模块包括：
92.端到端机器学习单元，在模型训练服务器上使用端到端机器学习平台进行训练和评估，模型训练服务器具有多核gpu运算处理器；
93.所述端到端机器学习平台包括：数字病理斑块分类层、数字病理斑块相似度计算层及数字病理斑块筛选层；接收所述模型训练服务器上传的用于进行机器学习模型训练的数据样本和所述机器学习模型的目标功能，所述目标功能包括：数字病理斑块分类、数字病理斑块相似度计算及数字病理斑块筛选；
94.多核gpu运算处理单元，通过多核gpu运算处理器，运行自适应矩估计优化器对深度学习模型进行优化，获取矩估计优化深度学习模型；
95.全卷积病理数据训练单元，通过矩估计优化深度学习模型利用全卷积神经网络对数字病理斑块增强训练集进行数据训练，训练完成后获取全卷积神经网络深度学习模型。
96.上述技术方案的原理及效果为：所述矩估计优化模型训练子模块包括：端到端机器学习单元，在模型训练服务器上使用端到端机器学习平台进行训练和评估，模型训练服务器具有多核gpu运算处理器；所述端到端机器学习平台包括：数字病理斑块分类层、数字病理斑块相似度计算层及数字病理斑块筛选层；接收所述模型训练服务器上传的用于进行机器学习模型训练的数据样本和所述机器学习模型的目标功能，所述目标功能包括：数字病理斑块分类、数字病理斑块相似度计算及数字病理斑块筛选；多核gpu运算处理单元，通过多核gpu运算处理器，运行自适应矩估计优化器对深度学习模型进行优化，获取矩估计优化深度学习模型；全卷积病理数据训练单元，通过矩估计优化深度学习模型利用全卷积神经网络对数字病理斑块增强训练集进行数据训练，训练完成后获取全卷积神经网络深度学习模型；能够进行多核gpu运算及多层处理，使自适应矩估计优化速度更快，使模型训练效率大幅提高。
97.在一个实施例中，所述深度学习模型性能评估子模块包括：
98.完全连接层去除单元，利用全卷积神经网络，去除完全连接层；通过矩估计优化深度学习模型利用全卷积神经网络对数字病理斑块增强训练集进行数据训练；
99.数据训练推断单元，在数据训练推断阶段，将数字化幻灯片图像中的wsi全视野数字切片划分为2000
×
2000像素的数字图像小块进行训练推断；输入2200
×
2200-pixel贴图来进行重叠补丁；选取中间2000
×
2000-pixel区域进行最终预测；
100.深度学习最终预测单元，通过滑动阈值法进行roc曲线概率构造；使用第1000个最高像素级概率作为幻灯片级ec概率；模型最终预测2000
×
2000像素的ec概率。
101.上述技术方案的原理及效果为：所述深度学习模型性能评估子模块包括：完全连接层去除单元，利用全卷积神经网络，去除完全连接层；通过矩估计优化深度学习模型利用全卷积神经网络对数字病理斑块增强训练集进行数据训练；数据训练推断单元，在数据训练推断阶段，将数字化幻灯片图像中的wsi全视野数字切片划分为2000
×
2000像素的数字图像小块进行训练推断；输入2200
×
2200-pixel贴图来进行重叠补丁；选取中间2000
×
2000-pixel区域进行最终预测；深度学习最终预测单元，通过滑动阈值法进行roc曲线概率构造；使用第1000个最高像素级概率作为幻灯片级ec概率；模型最终预测2000
×
2000像素的ec概率；计算数字图像小块与pixel贴图进行重叠补丁的评价因子：
102.103.其中，pjymn表示数字图像小块与pixel贴图进行重叠补丁的评价因子，btm,n表示数字图像小块的边缘信息保留值，qtm,n表示数字图像小块的边缘强度值，bpm,n表示pixel贴图的边缘信息保留值，qpm,n表示pixel贴图的边缘强度值，m
×
n表示图像像素值2000
×
2000，m表示图像像素值第m个像素点，n表示图像像素值第n个像素点；通过计算数字图像小块与pixel贴图进行重叠补丁的评价因子，数字图像小块与pixel贴图进行重叠补丁的评价因子的取值范围为0到1之间，通过中值滤波增大边缘信息保留值，使数字图像小块与pixel贴图进行重叠补丁的评价因子值在取值范围内越接近1，则数字图像小块与pixel贴图的融合图像保留源图像边缘信息越多重叠补丁融合效果显著变好。
104.在一个实施例中，所述评估判定调优检测子模块包括：
105.评估判定持续调优单元，对全卷积神经网络深度学习模型评估结果进行判定，判定模型训练性能评价指标的模型准确性参数、模型敏感性参数及模型特异性参数；当成功预测的幻灯片相对于幻灯片总数的准确度比例未达到预期准确度比例时或正确识别的肿瘤与正常切片的百分比未达到预期正确百分比时；反馈判定信息进行模型训练过程参数持续调优；
106.训练评估验证单元，通过模型训练过程参数持续调优，直至成功预测的幻灯片相对于幻灯片总数的准确度比例达到预期准确度比例时，或正确识别的肿瘤与正常切片的百分比达到预期正确百分比时，训练评估验证集验证完成；
107.模型测试幻灯片检测单元，验证集验证完成后，进行数字化幻灯片图像测试集数据的测试；当幻灯片图像回顾性测试集的回顾性测试集准确性参数、回顾性测试集敏感性参数及回顾性测试集特异性参数，均超过设定回顾性测试集标准参数；或者，当幻灯片图像前瞻性测试集的前瞻性测试集准确性参数、前瞻性测试集敏感性参数及前瞻性测试集特异性参数，均超过设定前瞻性测试集标准参数；数字化幻灯片图像测试集数据的测试完成；进行子宫内膜癌全幻灯片图像检测。
108.上述技术方案的原理及效果为：所述评估判定调优检测子模块包括：评估判定持续调优单元，对全卷积神经网络深度学习模型评估结果进行判定，判定模型训练性能评价指标的模型准确性参数、模型敏感性参数及模型特异性参数；当成功预测的幻灯片相对于幻灯片总数的准确度比例未达到预期准确度比例时或正确识别的肿瘤与正常切片的百分比未达到预期正确百分比时；反馈判定信息进行模型训练过程参数持续调优；训练评估验证单元，通过模型训练过程参数持续调优，直至成功预测的幻灯片相对于幻灯片总数的准确度比例达到预期准确度比例时，或正确识别的肿瘤与正常切片的百分比达到预期正确百分比时，训练评估验证集验证完成；模型测试幻灯片检测单元，验证集验证完成后，进行数字化幻灯片图像测试集数据的测试；当幻灯片图像回顾性测试集的回顾性测试集准确性参数、回顾性测试集敏感性参数及回顾性测试集特异性参数，均超过设定回顾性测试集标准参数；或者，当幻灯片图像前瞻性测试集的前瞻性测试集准确性参数、前瞻性测试集敏感性参数及前瞻性测试集特异性参数，均超过设定前瞻性测试集标准参数；数字化幻灯片图像测试集数据的测试完成；进行子宫内膜癌全幻灯片图像检测；通过对可疑子宫内膜癌区域的预筛查，可显著提高病理诊断工作效率。
109.尽管本发明的实施方案已公开如上，但其并不仅仅限于说明书和实施方式中所列运用，它完全可以被适用于各种适合本发明的领域，对于熟悉本领域的人员而言，可容易地
实现另外的修改，因此在不背离权利要求及等同范围所限定的一般概念下，本发明并不限于特定的细节与这里示出与描述的图例。

技术特征：
1.一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，其特征在于，包括：幻灯片数字化图像分类模块，扫描子宫内膜幻灯片获取数字化幻灯片图像；对数字化幻灯片图像根据肿瘤分类标准进行分类，获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；网格搜索病理斑块提取模块，对数字化幻灯片图像进行网格搜索，提取有效组织面积，并分块获取数字图像小块；从数字图像小块的有效组织面积中并排非重叠提取数字病理斑块；深度学习模型优化训练模块，对数字病理斑块使用atrous空间金字塔池化，使模型聚焦于肿瘤细胞；通过自适应矩估计优化器对深度学习模型进行优化，进行数字化幻灯片图像训练集数据训练，获取全卷积神经网络深度学习模型；模型评估全幻灯片图像检测模块，通过逻辑运算脚本计算统计数据，评估全卷积神经网络深度学习模型性能，进行子宫内膜癌全幻灯片图像检测。2.根据权利要求1所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，其特征在于，所述幻灯片数字化图像分类模块包括：自动缩放数字扫描子模块，通过自动缩放数字幻灯片扫描装置扫描子宫内膜幻灯片获取数字化幻灯片图像；肿瘤标准训练集合子模块，根据肿瘤分类标准，对数字化幻灯片图像进行分类，获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；将数字化幻灯片图像测试集根据数据来源进行分类，获取幻灯片图像回顾性测试集和幻灯片图像前瞻性测试集；多头显微配合标定子模块，通过多头显微镜数据配合标定，获取数字化幻灯片图像测试集中所有病例的金标准诊断数据。3.根据权利要求1所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，其特征在于，所述网格搜索病理斑块提取模块包括：灰度缩略图处理子模块，通过缩略图处理，获取数字化幻灯片图像缩略图；阈值参数网格搜索子模块，在数字化幻灯片图像缩略图上，对阈值参数进行网格搜索，提取有效组织面积；数字病理斑块提取子模块，将数字化幻灯片图像分成320
×
320像素的数字图像小块；从数字图像小块的有效组织面积中并排非重叠提取数字病理斑块；数字病理斑块包括：数字病理恶性斑块及数字病理良性斑块；数字病理恶性斑块数量为891330个；数字病理良性斑块数量为1983966个。4.根据权利要求1所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，其特征在于，所述深度学习模型优化训练模块包括：模型聚焦肿瘤细胞子模块，对数字病理斑块使用atrous空间金字塔池化，并去除图像级池化信息，使模型聚焦于肿瘤细胞；数字病理斑块增强子模块，对数字病理斑块亮度、数字病理斑块对比度、数字病理斑块色相和数字病理斑块饱和度进行随机化参数增强，获取数字病理斑块增强训练集；矩估计优化模型训练子模块，通过自适应矩估计优化器对深度学习模型进行优化，获取矩估计优化深度学习模型；通过矩估计优化深度学习模型利用全卷积神经网络对数字病
理斑块增强训练集进行数据训练，训练完成后获取全卷积神经网络深度学习模型。5.根据权利要求1所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，其特征在于，所述模型评估全幻灯片图像检测模块包括：评价指标逻辑运算子模块，设置模型训练性能评价指标；创建内部逻辑运算脚本，通过逻辑运算脚本计算统计数据；并使用自动绘图绘制训练曲线；深度学习模型性能评估子模块，评估全卷积神经网络深度学习模型性能，评估成功预测的幻灯片相对于幻灯片总数的准确度比例；评估正确识别的肿瘤与正常切片的百分比；获取全卷积神经网络深度学习模型评估结果；评估判定调优检测子模块，对全卷积神经网络深度学习模型评估结果进行判定，反馈判定信息进行模型训练过程参数持续调优，进行子宫内膜癌全幻灯片图像检测。6.根据权利要求2所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，其特征在于，所述肿瘤标准训练集合子模块包括：肿瘤分类信息收集单元，通过数据收集肿瘤分类标准信息，获取肿瘤分类标准；幻灯片图像分类单元，根据肿瘤分类标准，对数字化幻灯片图像进行分类；获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；测试集来源分类单元，通过数据源分析划分数据来源，将数字化幻灯片图像测试集根据数据来源进行分类，获取幻灯片图像回顾性测试集和幻灯片图像前瞻性测试集。7.根据权利要求4所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，其特征在于，所述模型聚焦肿瘤细胞子模块包括：空间金字塔池化单元，对接deeplab v3和resnet-50，采用atrous空间金字塔池化，对多尺度扩张的模型进行多尺度检测；池化信息去除单元，从atrous空间金字塔池化中去除图像级池化信息，使模型聚焦于肿瘤细胞。8.根据权利要求4所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，其特征在于，所述矩估计优化模型训练子模块包括：端到端机器学习单元，在模型训练服务器上使用端到端机器学习平台进行训练和评估，模型训练服务器具有多核gpu运算处理器；所述端到端机器学习平台包括：数字病理斑块分类层、数字病理斑块相似度计算层及数字病理斑块筛选层；接收所述模型训练服务器上传的用于进行机器学习模型训练的数据样本和所述机器学习模型的目标功能，所述目标功能包括：数字病理斑块分类、数字病理斑块相似度计算及数字病理斑块筛选；多核gpu运算处理单元，通过多核gpu运算处理器，运行自适应矩估计优化器对深度学习模型进行优化，获取矩估计优化深度学习模型；全卷积病理数据训练单元，通过矩估计优化深度学习模型利用全卷积神经网络对数字病理斑块增强训练集进行数据训练，训练完成后获取全卷积神经网络深度学习模型。9.根据权利要求5所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，其特征在于，所述深度学习模型性能评估子模块包括：完全连接层去除单元，利用全卷积神经网络，去除完全连接层；通过矩估计优化深度学习模型利用全卷积神经网络对数字病理斑块增强训练集进行数据训练；
数据训练推断单元，在数据训练推断阶段，将数字化幻灯片图像中的wsi全视野数字切片划分为2000
×
2000像素的数字图像小块进行训练推断；输入2200
×
2200-pixel贴图来进行重叠补丁；选取中间2000
×
2000-pixel区域进行最终预测；深度学习最终预测单元，通过滑动阈值法进行roc曲线概率构造；使用第1000个最高像素级概率作为幻灯片级ec概率；模型最终预测2000
×
2000像素的ec概率。10.根据权利要求5所述的一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，其特征在于，所述评估判定调优检测子模块包括：评估判定持续调优单元，对全卷积神经网络深度学习模型评估结果进行判定，判定模型训练性能评价指标的模型准确性参数、模型敏感性参数及模型特异性参数；当成功预测的幻灯片相对于幻灯片总数的准确度比例未达到预期准确度比例时或正确识别的肿瘤与正常切片的百分比未达到预期正确百分比时；反馈判定信息进行模型训练过程参数持续调优；训练评估验证单元，通过模型训练过程参数持续调优，直至成功预测的幻灯片相对于幻灯片总数的准确度比例达到预期准确度比例时，或正确识别的肿瘤与正常切片的百分比达到预期正确百分比时，训练评估验证集验证完成；模型测试幻灯片检测单元，验证集验证完成后，进行数字化幻灯片图像测试集数据的测试；当幻灯片图像回顾性测试集的回顾性测试集准确性参数、回顾性测试集敏感性参数及回顾性测试集特异性参数，均超过设定回顾性测试集标准参数；或者，当幻灯片图像前瞻性测试集的前瞻性测试集准确性参数、前瞻性测试集敏感性参数及前瞻性测试集特异性参数，均超过设定前瞻性测试集标准参数；数字化幻灯片图像测试集数据的测试完成；进行子宫内膜癌全幻灯片图像检测。

技术总结
本发明提供了一种深度学习模型的子宫内膜癌全幻灯片图像检测系统，包括：幻灯片数字化图像分类模块，获取数字化幻灯片图像训练集、数字化幻灯片图像验证集及数字化幻灯片图像测试集；网格搜索病理斑块提取模块，从数字图像小块的有效组织面积中并排非重叠提取数字病理斑块；深度学习模型优化训练模块，对数字病理斑块使用atrous空间金字塔池化，使模型聚焦于肿瘤细胞；通过自适应矩估计优化器对深度学习模型进行优化，进行数字化幻灯片图像训练集数据训练，获取全卷积神经网络深度学习模型；模型评估全幻灯片图像检测模块，评估全卷积神经网络深度学习模型性能，进行子宫内膜癌全幻灯片图像检测。全幻灯片图像检测。全幻灯片图像检测。


技术研发人员：王书浩 田艳杰
受保护的技术使用者：北京透彻未来科技有限公司
技术研发日：2023.05.19
技术公布日：2023/8/14