存储和读取方法、装置、电子设备和存储介质制造方法及图纸

本公开涉及一种存储和读取方法、装置、电子设备和存储介质，所述存储方法包括：根据样本集中样本的标注，确定与样本集对应的描述信息；根据样本集中样本的字段及存储位置，确定与样本集对应的字段信息；根据描述信息和字段信息，确定样本集的配置文件。根据本公开的实施例的读取方法，可确定样本集的描述信息和样本的字段信息，并基于描述信息和字段信息确定配置文件，生成配置文件，可支持多种数据类型的样本存储在一个样本集中，适应更复杂类型的样本集的存储，根据配置文件即可获取样本集中各类型样本数据的信息，便于样本数据的读取。

Storage and reading methods, devices, electronic devices and storage media

【技术实现步骤摘要】
存储和读取方法、装置、电子设备和存储介质
本公开涉及计算机
，尤其涉及一种存储和读取方法、装置、电子设备和存储介质。
技术介绍
在机器学习中，尤其是在需要处理多种数据集的情况下，数据集存储方式就极为重要。在相关技术中，对于数据集存储也通常是为了适应数据集本身的结构，例如，CSV、HDF5、文件存储(图像音频)等数据存储方式，虽然功能强大，但是支持的数据类型受限，并不能满足数据集中多种数据的存储需求，也不易于读取数据。
技术实现思路
本公开提出了一种存储和读取方法、装置、电子设备和存储介质。根据本公开的一方面，提供了一种存储方法，包括：根据样本集中样本的标注，确定与所述样本集对应的描述信息；根据样本集中样本的字段及存储位置，确定与所述样本集对应的字段信息；根据所述描述信息和所述字段信息，确定所述样本集的配置文件。根据本公开的实施例的读取方法，可确定样本集的描述信息和样本的字段信息，并基于描述信息和字段信息确定配置文件，生成配置文件，可支持多种数据类型的样本存储在一个样本集中，适应更本文档来自技高网...

【技术保护点】
1.一种存储方法，其特征在于，包括：/n根据样本集中样本的标注，确定与所述样本集对应的描述信息；/n根据样本集中样本的字段及存储位置，确定与所述样本集对应的字段信息；/n根据所述描述信息和所述字段信息，确定所述样本集的配置文件。/n

【技术特征摘要】
1.一种存储方法，其特征在于，包括：
根据样本集中样本的标注，确定与所述样本集对应的描述信息；
根据样本集中样本的字段及存储位置，确定与所述样本集对应的字段信息；
根据所述描述信息和所述字段信息，确定所述样本集的配置文件。


2.根据权利要求1所述的方法，其特征在于，所述描述信息包括对样本的标注的描述信息，
其中，根据样本集中样本的标注，确定与所述样本集对应的描述信息，包括：
根据所述样本集中样本的标注，获得标注列表，所述标注列表包括样本的标注的类别；
对标注列表中的标注添加描述，获得所述样本的标注的描述信息。


3.根据权利要求1或2所述的方法，其特征在于，所述样本集中包括至少一种数据类型的样本。


4.根据权利要求3所述的方法，其特征在于，所述字段信息还包括样本的读取方式信息，
其中，所述方法还包括：
根据样本集中样本的数据类型，确定用于各数据类型对应的读取方式；
根据所述样本的数据类型和对应的读取方式，获得所述样本的读取方式信息。


5.根据权利要求1-4任一项所述的方法，其特征在于，所述根据样本集中样本的标注，确定与所述样本集对应的描述信息，还包括：
确定用于划分样本集中样本的类别的索引范围信息；
根据所述样本集中样本的描述信息和所述样本类别的索引范围信息，生成与所述样本集对应的...

【专利技术属性】
技术研发人员：王若晖，胡颖凡，
申请(专利权)人：深圳市商汤科技有限公司，
类型：发明
国别省市：广东;44