当前位置: 首页 > 专利查询>陈致远专利>正文

一种人工智能筛选错误数据的系统及方法技术方案

技术编号:33305803 阅读:48 留言:0更新日期:2022-05-06 12:15
本发明专利技术公开了一种人工智能筛选错误数据的系统及方法,包括筛选模块,筛选模块包含有筛选处理模型、数据处理系统、正常数据和异常数据;所述筛选处理模型和数据处理系统相连接,且筛选处理模型包含有正常数据和异常数据。本发明专利技术主要基于系统的预测数值模型,构建针对预测数值的异常数据筛选方案,使其能够达到在较少数据量预测时,解决由于预测因素较多,预测溶出度较多,在出现异常数据后形成预测数据的偏差程度较大的现象,根据筛选后的预测数据再次形成数据模型后,其准确率增加,误差大量降低,与真实数据对比更加稳定,实现在较低数据量的情况下提高预测数据的真实性的效果。效果。效果。

【技术实现步骤摘要】
一种人工智能筛选错误数据的系统及方法


[0001]本专利技术涉及数据处理和筛选领域,特别涉及一种人工智能筛选错误数据的系统及方法。

技术介绍

[0002]现在越来越多的公司和科研机构开始了人工智能在药物研发领域的探索。但由于制剂的特殊性,很少有公司使用人工智能对其进行研究。制剂的辅料成分多为天然有机物,因此不同批次或不同生产商生产的辅料,实际结构也不相同。以海藻酸为例,海藻酸的相对分子质量在20000到240000之间,其分子量的不同导致其物理性质存在很大差异,影响其崩解性和粘合性。
[0003]在根据少量样本进行系统处理后,又需要针对数据构成筛选调整,特别是在实际项目中,由于实验操作有误或原辅料出现问题等情况,经常会出现偏差较大的异常数据,这个时候,对异常数据的检测就尤为重要,通常是实验数据处理中的趋势。

技术实现思路

[0004]本专利技术要解决的技术问题是克服现有技术的缺陷,提供一种人工智能筛选错误数据的系统及方法。
[0005]为了解决上述技术问题,本专利技术提供了如下的技术方案:
[0006]本专利技术一种人工智能筛选错误数据的系统,包括筛选模块,筛选模块包含有筛选处理模型、数据处理系统、正常数据和异常数据,其中筛选模块还包括BP神经网络,径向基函数RBF神经网络,P感知器神经网络,自组织神经网络,FFNN向前反馈神经网络,HN霍普菲尔神经网络,CNN卷积神经网络, RNN周期神经网络,GAN生成对抗网络,DN去卷积神经网络;
[0007]所述筛选处理模型和数据处理系统相连接,且筛选处理模型包含有正常数据和异常数据。
[0008]本专利技术提供了如下的第二个技术方案:
[0009]本专利技术还提供了这种人工智能筛选错误数据的的使用方法,步骤如下:
[0010]S1.输入数据量,在筛选处理模型中,设置一个起始训练数量,输入后,数据处理系统会对起始输入数据之后的输入数据进行预测,并与实际的输入数据进行对比,计算出F2值;
[0011]S2.设定误差区间,根据实验需求设定一个合适的F2区间为允许的误差范围;
[0012]S21.当F2不在该区间内时,数据处理系统会弹出提示,使人为操作是否将该数据剔除;
[0013]S22.当数据量很大时,人工筛选需要更多时间,可改为根据F2值自动筛选,系统将不再询问是否保留疑似错误数据,并自动删除。
[0014]作为本专利技术的一种优选技术方案,所述数据处理系统包含有预测模块,预测模块包含数据模型、神经网络模型、训练模型、第一优化模块、第二优化模块和辅料调整模块;
[0015]所述训练模型分别与数据模型和神经网络模型相连接,所述数据模型与第一优化模块或第二优化模块相连接,所述辅料调整模块与第一优化模块或第二优化模块相连接。
[0016]与现有技术相比,本专利技术的有益效果如下:
[0017]本专利技术主要基于系统的预测数值模型,构建针对预测数值的异常数据筛选方案,使其能够达到在较少数据量预测时,解决由于预测因素较多,预测溶出度较多,在出现异常数据后形成预测数据的偏差程度较大的现象,根据筛选后的预测数据再次形成数据模型后,其准确率增加,误差大量降低,与真实数据对比更加稳定,实现在较低数据量的情况下提高预测数据的真实性的效果。
附图说明
[0018]附图用来提供对本专利技术的进一步理解,并且构成说明书的一部分,与本专利技术的实施例一起用于解释本专利技术,并不构成对本专利技术的限制。在附图中:
[0019]图1是本专利技术的F2值对比曲线示意图;
[0020]图2是本专利技术的溶解速率和时间影响示意图。
[0021]图3是本专利技术的数据运行模型示意图。
具体实施方式
[0022]以下结合附图对本专利技术的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本专利技术,并不用于限定本专利技术。
[0023]实施例1
[0024]如图1

3所示,本专利技术提供一种人工智能筛选错误数据的系统,包括筛选模块,筛选模块包含有筛选处理模型、数据处理系统、正常数据和异常数据,其中筛选模块还包括BP神经网络,径向基函数RBF神经网络,P感知器神经网络,自组织神经网络,FFNN向前反馈神经网络,HN霍普菲尔神经网络, CNN卷积神经网络,RNN周期神经网络,GAN生成对抗网络,DN去卷积神经网络;
[0025]所述筛选处理模型和数据处理系统相连接,且筛选处理模型包含有正常数据和异常数据。
[0026]本专利技术提供了如下的第二个技术方案:
[0027]本专利技术还提供了这种人工智能筛选错误数据的方法,具体步骤如下:
[0028]S1.输入数据量,在筛选处理模型中,设置一个起始训练数量,输入后,数据处理系统会对起始输入数据之后的输入数据进行预测,并与实际的输入数据进行对比,计算出F2值;
[0029]S2.设定误差区间,根据实验需求设定一个合适的F2区间为允许的误差范围;
[0030]S21.当F2不在该区间内时,数据处理系统会弹出提示,使人为操作是否将该数据剔除;
[0031]S22.当数据量很大时,人工筛选需要更多时间,可改为根据F2值自动筛选,系统将不再询问是否保留疑似错误数据,并自动删除。
[0032]数据处理系统包含有预测模块,预测模块包含数据模型、神经网络模型、训练模型、第一优化模块、第二优化模块和辅料调整模块;
[0033]所述训练模型分别与数据模型和神经网络模型相连接,所述数据模型与第一优化模块或第二优化模块相连接,所述辅料调整模块与第一优化模块或第二优化模块相连接。
[0034]基于原数据处理系统,主要基于预测模块构成,具体步骤如下:
[0035]S1.建立数据模型,将大量的实验来获取训练数据,输入到计算机后,进行了标准化等数据预处理工作;
[0036]S2.建立神经网络模型,采用三层RBF神经网络作为数据筛选方法,四层基于BP算法的神经网络作为预测方法,神经网络参数初始设定后,编制神经网络模型;
[0037]S3.利用S1中得到的数据对S2中建立的神经网络模型进行训练,并评价模型的训练效果;
[0038]S31.如果效果不理想,返回过程S2修改神经网络参数,以提高模型的非线性拟合能力;
[0039]S32.如果符合要求,结束该过程。
[0040]预测模块包含有F2算法、BP神经网络、径向基函数RBF神经网络、P感知器神经网络、自组织神经网络、FFNN向前反馈神经网络、HN霍普菲尔神经网络、CNN卷积神经网络、RNN周期神经网络、GAN生成对抗网络和DN去卷积神经网络
[0041]首先我们选择21组数据中的前20组数据对模型进行训练,得出第21组数据的预测值,我们对该模型进行了50次训练,并对预测值进行对比,在数据输入后,使用神经网络对输入的数据在输入前进行预测,并将其预测值与真实值进行对比,计算其差异值,计算方法包括F2法,计算方差法,本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种人工智能筛选错误数据的系统,其特征在于,包括筛选模块,筛选模块包含有筛选处理模型、数据处理系统、正常数据和异常数据,其中筛选模块还包括BP神经网络,径向基函数RBF神经网络,P感知器神经网络,自组织神经网络,FFNN向前反馈神经网络,HN霍普菲尔神经网络,CNN卷积神经网络,RNN周期神经网络,GAN生成对抗网络,DN去卷积神经网络;所述筛选处理模型和数据处理系统相连接,且筛选处理模型包含有正常数据和异常数据。2.根据权利要求1所述的一种人工智能筛选错误数据的方法,其特征在于,具体步骤如下:S1.输入数据量,在筛选处理模型中,设置一个起始训练数量,输入后,数据处理系统会对起始输入数据之后的输入数据进行预测,并与实际的输入数据进行对比,计算出F2值;S2.设定误差区间,根据实验需求设定一个合适的F2区间为允许的误差范围;S21.当F2不在该区间内时,数据处理系统会弹出提示,使...

【专利技术属性】
技术研发人员:王昊昱关秋峰陈致远曹兆洋李汶锦黄亮
申请(专利权)人:陈致远
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1