【技术实现步骤摘要】
本专利技术涉及数据处理领域，特别涉及一种肺结节分类预测模型的测评系统。
技术介绍
1、随着视觉图像目标检测/分类预测模型在医疗领域的应用与推广，目前已有大量的分类预测模型被用于对输入的医学图像(诸如ct影像、核磁影像、b超影像)进行肺结节目标检测与分类预测。而这些肺结节分类预测模型在针对呼吸疾病的医学研究中心也得到了广泛使用应用。但我们在应用过程中发现，不同来源的肺结节分类预测模型因为各自实现的基础模型结构不同、训练范化能力不同等原因有可能会导致不同模型间的预测性能存在较大差异；为降低因不同模型间过大差异带来的预测质量波动，就需要各个医学研究中心具备能对多模型进行测评的技术能力，也就是说对各个医学研究中心而言如何构建一个系统来实现对各类肺结节分类预测模型的测评是目前亟待解决的技术问题。
技术实现思路
1、本专利技术的目的，就是针对现有技术的缺陷，提供一种肺结节分类预测模型的测评系统，该系统包括：数据采集模块、申请输入模块、综合管理模块、任务管理模块、测试数据库、测评模型库和测评报告库；其中，数据采集模块用于采集原始标签数据来充实测试数据库；测评模型库则用来加载所有待测试的肺结节分类预测模型；综合管理模块在收到申请输入模块发送的模型测评申请后，向任务管理模块的任务队列中添加新任务记录；任务管理模块则为各个任务记录分配独立的工作流进行模型测评，并将得到的测评报告存到测评模型库中以供用户查阅。本专利技术系统可以对各类肺结节分类预测模型进行测评；通过本专利技术可在相同的测试配置下对不同的肺
2、为实现上述目的，本专利技术实施例提供了一种肺结节分类预测模型的测评系统，所述系统包括：数据采集模块、申请输入模块、综合管理模块、任务管理模块、测试数据库、测评模型库和测评报告库；
3、所述数据采集模块与所述综合管理模块连接；所述数据采集模块用于接收用户输入的第一采集数据向所述综合管理模块发送；
4、所述申请输入模块与所述综合管理模块连接；所述申请输入模块用于接收用户输入的第一模型测评申请向所述综合管理模块发送；并将所述综合管理模块回发的第一申请受理通知向用户反馈；
5、所述申请输入模块还用于接收用户输入的所述第一申请受理通知；并将携带了所述第一申请受理通知的第一测评任务标识的第一查询申请向所述综合管理模块发送；并对所述综合管理模块回发的第一查询回执进行显示；
6、所述综合管理模块分别与所述任务管理模块、所述测试数据库、所述测评模型库和所述测评报告库连接；所述综合管理模块用于对所述第一采集数据进行测试用例转换得到对应的第一测试用例记录存入所述测试数据库；
7、所述综合管理模块还用于根据所述第一模型测评申请和所述测试数据库进行测评任务配置生成对应的第一任务记录向所述任务管理模块发送；并将所述第一任务记录的第一任务标识字段提取出来作为对应的所述第一测评任务标识，并由所述第一模型测评申请和所述第一测评任务标识组成对应的所述第一申请受理通知向所述申请输入模块回发；
8、所述综合管理模块还用于根据所述第一查询申请、所述任务管理模块和所述测评报告库进行测评任务进度与报告查询处理得到对应的所述第一查询回执向所述申请输入模块回发；
9、所述任务管理模块分别与所述测试数据库、所述测评模型库和所述测评报告库连接；
10、所述任务管理模块用于在本地预置一个第一任务队列；并在每收到一个所述第一任务记录时就其向所述第一任务队列中添加；
11、所述任务管理模块还用于定期对所述第一任务队列进行任务记录遍历并在遍历过程中基于各任务记录状态进行对应的评测任务启动与关闭处理；
12、所述测试数据库用于存储多个所述第一测试用例记录；
13、所述测评模型库用于加载多个肺结节分类预测模型；各个所述肺结节分类预测模型对应一个第一模型名称；
14、所述肺结节分类预测模型用于对输入图像进行肺结节目标检测得到一个或多个第一目标检测框；并对各个所述第一目标检测框进行肺结节类型预测得到对应的第一类型预测向量；并由各个所述第一目标检测框和对应的所述第一类型预测向量组成一个对应的第一肺结节预测数据；并由得到的所有所述第一肺结节预测数据组成对应的第一肺结节预测数据集合；所述第一目标检测框包括第一检测框尺寸、第一检测框朝向和第一检测框中心点坐标；所述第一类型预测向量包括多个第一类型预测概率；所述第一类型预测概率至少包括非结节预测概率、纯磨玻璃结节预测概率、混合型磨玻璃结节预测概率、实性结节预测概率、钙化结节预测概率、胸膜结节预测概率和恶性结节预测概率；
15、所述测评报告库用于存储多个第一模型测评报告。
16、优选的，所述第一采集数据包括第一基本信息、第一影像类型、第一影像和第一标签集；所述第一基本信息包括性别、年龄；所述第一影像类型包括ct影像、核磁影像、b超影像；所述第一标签集包括多个第一肺结节标签；所述第一肺结节标签包括第一结节类型、第一结节中心点坐标、第一结节长径、第一结节短径和第一结节尺寸类型；所述第一结节类型至少包括非结节、纯磨玻璃结节、混合型磨玻璃结节、实性结节、钙化结节、胸膜结节和恶性结节；所述第一结节尺寸类型包括大尺寸和非大尺寸；所述第一结节长径超过预设尺寸阈值时，对应的所述第一结节尺寸类型为大尺寸；所述第一结节长径未超过所述预设尺寸阈值时，对应的所述第一结节尺寸类型为非大尺寸；
17、所述第一模型测评申请包括第一测评模型名称、第一测评期望启动时间和第一测评数据设置；所述第一测评数据设置包括第一性别设置、第一年龄段设置和第一影像类型设置；所述第一性别设置包括全性别、性别男和性别女；所述第一年龄段设置包括第一起始年龄和第一结束年龄，所述第一起始年龄和所述第一结束年龄若全为零则表示选择全年龄段；所述第一影像类型设置包括全影像类型、ct影像、核磁影像和b超影像；
18、所述第一测试用例记录包括第一用例标识字段、第一性别字段、第一年龄字段、第一影像类型字段、第一影像字段和第一标签集字段；所述第一标签集字段包括多个所述第一肺结节标签；
19、所述第一任务记录包括所述第一任务标识字段、第一任务模型名称字段、第一期望启动时间字段、第一实际启动时间字段、第一任务数据设置字段和第一任务执行状态；所述第一任务执行状态包括未启动、已启动和已完成；
20、所述第一模型测评报告包括第一报告标识、第一报告任务标识、第一测试模型名称、第一测试启动时间、第一测试结束时间、第一测试配置、第一测试用例集、第一测试记录集和第一测试评估数据；所述第一测试用例集包括多个所述第一测试用例记录；所述第一测试记录集包括多个第一测试记录；所述第一测试记录包括第二用例标识字段、第二标签集字段和第一测试集字段；所述第一测试集字段用于存储第一测试集；所述本文档来自技高网...
【技术保护点】
1.一种肺结节分类预测模型的测评系统，其特征在于，所述系统包括：数据采集模块、申请输入模块、综合管理模块、任务管理模块、测试数据库、测评模型库和测评报告库；
2.根据权利要求1所述的肺结节分类预测模型的测评系统，其特征在于，
3.根据权利要求2所述的肺结节分类预测模型的测评系统，其特征在于，
4.根据权利要求2所述的肺结节分类预测模型的测评系统，其特征在于，
5.根据权利要求2所述的肺结节分类预测模型的测评系统，其特征在于，
6.根据权利要求2所述的肺结节分类预测模型的测评系统，其特征在于，
7.根据权利要求6所述的肺结节分类预测模型的测评系统，其特征在于，
8.根据权利要求7所述的肺结节分类预测模型的测评系统，其特征在于，
9.根据权利要求7所述的肺结节分类预测模型的测评系统，其特征在于，
【技术特征摘要】
1.一种肺结节分类预测模型的测评系统，其特征在于，所述系统包括：数据采集模块、申请输入模块、综合管理模块、任务管理模块、测试数据库、测评模型库和测评报告库；
2.根据权利要求1所述的肺结节分类预测模型的测评系统，其特征在于，
3.根据权利要求2所述的肺结节分类预测模型的测评系统，其特征在于，
4.根据权利要求2所述的肺结节分类预测模型的测评系统，其特征在于，<...
【专利技术属性】
技术研发人员：戚扬，
申请(专利权)人：北京汉博信息技术有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。