一种实验室数据自动采集与匹配方法组成比例

本申请提供了一种实验室数据自动采集与匹配方法，包括：获取实验数据的创建时间，并依据所述创建时间确定对应于目标时间的目标实验数据；将所述目标实验数据进行数据块分割；依据所述数据块生成数据块索引表；其中，所述数据块索引表包括数据块标识；依据所述数据块索引表从预设匹配方式中确定目标匹配方式；当调用存储节点中的所述目标实验数据时，获取所述数据块标识，并依据所述目标匹配方式调取所述目标实验数据中对应于所述数据块标识的数据内容。具有高适应性，能运用于绝大多数的检测设备中，大量减少字符串匹配次数，降低算法计算复杂度。在降低内存占用量的同时提高了字符串匹配速度，有着更佳的性能。

【技术实现步骤摘要】
一种实验室数据自动采集与匹配方法
本申请涉及数据处理领域，特别是一种实验室数据自动采集与匹配方法。
技术介绍
随着实验室检测技术的精细化，如何从大量数据中提取有用信息成为实验数据文件中数据处理的研究重点，字符串匹配主要用于文本域的数据采集。经过几十年的发展，字符串模式匹配广泛应用于计算机、敏感词检测、生物学、文本处理、统计等领域。现今，海关实验室检测设备种类繁多，厂源多样，业务量逐年递增，仍存在人工录用数据，导致检测周期长、偶然性差错出现率高的问题突出，难以满足海关实验室业务量大、数据处理不容差错的要求。其中，字符串匹配算法作为数据处理研究的重要领域，拥有高效的字符串匹配算法能明显缩短检测周期，是实现自动采集降低差错率的重要环节。然而，由于实验室检测设备出具的实验数据文件具有固定格式，和在大篇幅实验数据文件中仅需匹配少数几组数据的原因，运用现有的字符串匹配算法可以实现实验数据文件中字符串匹配的目的，但往往计算复杂度高，匹配效率低，占用系统内存大，在实际运用中有一定的差错率，难以满足如今海关实验室的需求。因此，为了提高实验数据文件本文档来自技高网...

【技术保护点】
1.一种实验室数据自动采集与匹配方法，其特征在于，所述方法包括：/n获取实验数据的创建时间，并依据所述创建时间确定对应于目标时间的目标实验数据；/n将所述目标实验数据进行数据块分割；/n依据所述数据块生成数据块索引表；其中，所述数据块索引表包括数据块标识；/n依据所述数据块索引表从预设匹配方式中确定目标匹配方式；/n当调用存储节点中的所述目标实验数据时，获取所述数据块标识，并依据所述目标匹配方式调取所述目标实验数据中对应于所述数据块标识的数据内容。/n

【技术特征摘要】
1.一种实验室数据自动采集与匹配方法，其特征在于，所述方法包括：
获取实验数据的创建时间，并依据所述创建时间确定对应于目标时间的目标实验数据；
将所述目标实验数据进行数据块分割；
依据所述数据块生成数据块索引表；其中，所述数据块索引表包括数据块标识；
依据所述数据块索引表从预设匹配方式中确定目标匹配方式；
当调用存储节点中的所述目标实验数据时，获取所述数据块标识，并依据所述目标匹配方式调取所述目标实验数据中对应于所述数据块标识的数据内容。


2.根据权利要求1所述的方法，其特征在于，还包括：
获取所述目标实验数据的粒度参数，并依据所述粒度参数生成对应于所述目标实验数据的目标哈希值；
当所述目标哈希值与目标存储节点中的现存哈希值不同时，将所述目标哈希值存储至所述目标存储节点。


3.根据权利要求2所述的方法，其特征在于，所述将所述目标实验数据进行数据块分割的步骤包括：
确定被预设大小的数据分割窗口所选取的对应于所述目标实验数据的数据段落的指纹标识；
依据所述数据段落的位置和所述指纹标识确定所述目标实验数据的数据分割点；
依据所述数据分割点将所述目标实验数据分割为相应的数据块。


4.根据权利要求3所述的方法，其特征在于，所述确定被预设大小的数据分割窗口所选取的对应于所述目标实验数据的数据段落的指纹标识的步骤包括：
确定处于所述数据分割窗口内的对应于所述目标实验数据的数据段落的字节大小；
当所述字节大小处于预设范围内时，依据的所述数据段落生成所述指纹标识；当所述字节大小不处于预设范围内时，将所述数据分割窗口沿预设方向移动一个滑动单位。


5.根据权利要求3所述的方法，其特征在于，所述依据所述数据段落的位置和所述指纹标识确定所述目标实验数据的数据分割点的步骤，包括：
依据所述数据段落的位置从预设的期望指纹标识循序渐进表中确定期望指纹标识；

【专利技术属性】
技术研发人员：蔡伊娜，包先雨，程立勋，阮周曦，彭锦学，吴绍精，郭云，卢体康，秦智锋，
申请(专利权)人：深圳市检验检疫科学研究院，深圳海关信息中心，深圳海关动植物检验检疫技术中心，
类型：发明
国别省市：广东;44